Connexion
Abonnez-vous

Aux JO de Paris, la vidéosurveillance algorithmique n’a servi à (presque) rien

À qui profite la « vidéoprotection » ?

Aux JO de Paris, la vidéosurveillance algorithmique n’a servi à (presque) rien

Le rapport du comité d'évaluation de l'expérimentation de la vidéosurveillance algorithmique dans le cadre des Jeux olympiques de Paris révèle qu'un seul algorithme a été testé, sur la moitié seulement des motifs autorisés. Six détections d'intrusion et un seul colis suspect ont été identifiés. L'algorithme, par contre, a classé à tort des vitrines et feux de circulation comme incendies potentiels, et qualifié de « colis suspects » des poubelles et des... SDF. L'expérimentation aura donc eu le mérite de montrer qu'en l'état, la VSA n'est pas au point.

Le 16 janvier à 10h23

« Vidéosurveillance algorithmique : le rapport d’évaluation s’interroge sur l’efficacité du dispositif », titre Le Monde, qui parle d'un « bilan en demi-teinte ». « Le comité d'évaluation émet des doutes sur l'efficacité du dispositif mis en place pour les Jeux de Paris », renchérit France Info, évoquant « des résultats inégaux ».

Nos deux confrères ont, en effet, pu consulter le rapport, remis ce mardi 14 janvier au ministère de l’Intérieur, du comité d’évaluation de l’expérimentation (controversée) de vidéosurveillance algorithmique (VSA) dans l’espace public autorisée dans le cadre des JO de Paris.

France Info, qui fournit bien plus de verbatims du rapport que ne le fait Le Monde, relève que ses auteurs y écrivent que « le recours aux traitements algorithmiques mis en place dans le cadre de l'expérimentation s'est traduit par des performances techniques inégales, très variables en fonction des opérateurs et des cas d’usages, des contextes d’utilisation, ainsi que des caractéristiques techniques et du positionnement des caméras ».

Dans des propos qui font écho à ce que l'on sait déjà de l'efficacité (ou pas) des caméras de vidéosurveillance, le comité rappelle que l’intérêt de tels dispositifs « dépend largement du contexte d’utilisation ». Il relève que la VSA est, par exemple, « moins efficace quand il y a peu d'éclairage », mais plus pertinente « dans les espaces clos ou semi-clos, notamment les couloirs du métro et les gares, par rapport aux résultats observés dans les espaces ouverts ».

Une « maturité technologique insuffisante »

Fort d'une centaine de pages, le rapport commence par rappeler les limites de l'expérimentation, « qui laisse encore des questions en suspens », euphémise Le Monde.

Les auteurs soulignent d'une part que le nombre, sans équivalent dans l'histoire, de forces de l’ordre déployées sur le terrain, et les très nombreuses restrictions d'accès aux zones vidéosurveillées par les algorithmes ont « rendu la VSA moins utile qu’escompté ».

Certaines possibilités offertes par la loi, comme l’analyse d'images prises depuis des drones, n’ont pas, d'autre part, été mises en œuvre « en raison d’une maturité technologique insuffisante », souligne Le Monde.

L'expérimentation n'a en outre porté que sur un seul logiciel (Cityvision, de Wintics), alors qu'une dizaine de prestataires de VSA avaient répondu à l'appel d'offres, et que le ministère de l'Intérieur en avait initialement choisi trois (Wintics, Videtics et Chapsvision).

Le rapport relève que l'évaluation ne saurait donc proposer de « bilan » sur la « pertinence » de la VSA, ni se prononcer sur l'opportunité de la poursuivre, ou pas.

Des vitrines éclairées et feux de voiture pris pour des incendies

De plus, près de la moitié des 8 cas d'usage autorisés après avis de la CNIL n'ont pas été expérimentés, tels que la détection de départs d’incendie, de chutes de personne ou encore d’armes à feu, qui n'ont été testées ni par la RATP, ni par la SNCF.

La ville de Cannes a certes expérimenté la « présence ou utilisation d'armes » mais, tempère Le Monde, « sans résultats concluants et avec un grand nombre de faux positifs » :

« Quant à la détection des feux ou des chutes, le rapport mentionne, là aussi, une faible maturité technologique, les algorithmes prenant parfois les devantures de magasin ou les phares de voiture pour des incendies. »

Les SDF et les poubelles, des « colis suspects » comme les autres

La détection de la « présence d'objets abandonnés » dans les gares et stations de métro n'aurait, de son côté, abouti qu'à des résultats « très moyens ». 62 % des 270 alertes adressées par le logiciel étaient des « faux positifs », et seules 21 (soit moins de 8 %) se sont avérées « pertinentes ».

De plus, relève France Info, le logiciel peinerait à identifier les objets dont la présence sur les lieux n'a rien d'anormal, pour des performances qualifiées de « très inégales ». Il « assimile ainsi régulièrement le mobilier urbain (bancs, panneaux) ou encore les matériels de nettoyage (poubelles, seaux et machines de nettoyage) et autres objets fixes ou usuels » à des « colis suspects » :

« Plus grave, il lui arrive d’assimiler des personnes assises ou statiques, notamment des sans domicile fixe. »

Un seul cas d’usage fait l’unanimité : la détection d’intrusion

Sur les quelques cas d'usage réellement testés, et « de façon générale, les alertes émises par les logiciels de VSA n’ont entraîné qu’un nombre limité d’interventions », résume par ailleurs Le Monde :

« A la SNCF, six ont été menées grâce à la détection automatique d’intrusion en zone interdite avant et pendant les JO, et une seule pour objet abandonné. »

D'après Le Monde, et du point de vue de la technologie, « un seul cas d’usage fait l’unanimité : la détection d’intrusion en zone interdite », notamment utilisée pour identifier les personnes sur les voies.

La détection des flux de circulation et des déplacements en sens interdit (de personnes comme de véhicules), tout comme l’analyse de la densité de population, censée détecter les attroupements, seraient de leur côté jugés « satisfaisants » par les opérateurs de transport.

« Avec toutefois quelques réserves », temporise France Info. Le logiciel « a parfois eu du mal à comptabiliser un nombre d’individus trop resserrés (…) en raison de la hauteur d’emplacement des caméras », relève le rapport. Le dispositif apparaît en outre « moins efficace lorsque les caméras sont trop proches du public, les corps n’étant pas entièrement visibles ».

S'agissant des mouvements de foule, l'efficacité de la VSA serait là aussi « difficile à évaluer », reconnaît le rapport :

« Les quelques retours font état des difficultés rencontrées dans l’identification des véritables mouvements. Le traitement peut, en particulier, assimiler des groupes de personnes se déplaçant dans le même sens, sans précipitation particulière. Il est délicat de définir des mouvements de regroupement ou de dispersion rapide. »

Un « choix politique » qui appelle à « une vigilance particulière »

Le rapport affirme cependant que « les agents concernés sont globalement satisfaits de la mise en œuvre du dispositif » :

« L’intégration des écrans des caméras IA dans les salles de commandement, lorsqu’elle a été réalisée, a contribué à favoriser la complémentarité des caméras classiques et des caméras IA. »

Pour le comité d'évaluation, « l'abandon, la prolongation ou la pérennisation » du dispositif est « un choix politique » qui ne relève pas de sa mission. Il souligne cela dit que, si ce dispositif était mis en place, « une vigilance particulière s'impose (…) afin notamment de prévenir tout risque de détournement des finalités légales ou, plus fondamentalement, d’accoutumance au recours à une telle technologie à des fins de surveillance ».

Le Monde et France Info rappellent également que Laurent Nuñez, préfet de police de Paris, Bruno Retailleau, ministère de l'Intérieur et Philippe Tabarot, le nouveau ministre des Transports, se sont déjà prononcés en faveurs d'une généralisation du dispositif, sans même attendre le rapport du comité d'évaluation.

Commentaires (14)

votre avatar
Aux JO de Paris, la vidéosurveillance algorithmique n’a servi à (presque) rien
Je ne suis pas d'accord.

C'était une expérimentation. Les résultats montrent que la (les ?) solution(s) utilisée(s) sont largement insuffisante(s) voire mauvaise(s). Seule la détection d'intrusion semble avoir fait ses preuves.

Je trouve que cela est un très bon résultat : il faut arrêter de fantasmer sur ces solutions qui ont encore beaucoup de progrès à faire avant de pouvoir être utiles.
C'est comme cela qu'il faut présenter le résultat dans les médias : l'expérimentation a montré que les technologies n'étaient pas mûres et pour la seule qui a eu des résultats positifs, elle a très peu apporté (juste 6 cas détectés par la SNCF).
Ça évitera que le Préfet de police et les politiques poussent ces solutions en temps de rigueur budgétaire.

Par contre, sans autant de forces de l'ordre sur le terrain, on aurait peut-être eu plus de résultats positifs. C'est la seule limite à l’expérimentation que je vois.

Quant au comité d'évaluation, il ne joue pas son rôle en disant que la décision doit être politique. Dans l'état de l'art actuel, le seul point où c'est le cas, c'est la détection d'intrusion. Les autres cas ont montré l'inefficacité du dispositif. Ça devrait figurer noir sur blanc dans ses conclusions.
votre avatar
gros +1 avec ça c'est aussi ce que je pense quand un test echoue on dit qu'il a échoué on ne dit pas qu'il n'a servi à rien
votre avatar
"Ce n'est pas un échec, cela n'a pas fonctionné"
votre avatar
non pas du tout l'algo tournait et fonctionnait c'est juste qu'il détectait des poubelles, SDF, vitrines et voitures au lieu de colis et de feu c'est bien un échec critique je dirais même plus.
votre avatar
C'était de l'ironie, rapport à une célèbre phrase de notre suprême président
votre avatar
Niveau detection intrusions, cad les tripwire déjà dispo sur sur des cam IP Dahua à 50€ sans la moindre IA (également capables de trouver un visage à la manière des algo classiques de points de focus auto d'APN en mode portrait depuis 20 ans), franchement si c'est le seul apport c'est en effet assez ridicule comme bilan.

On sait faire depuis longtemps et avec de l'algorithmique classique sobre, efficace, pas cher.

J'aimerais connaître le tarif foutu là dedans avec des prestataires visiblement pas au niveau. Ils auraient mieux fait de demander conseil au PCC, eux savent visiblement faire (pour la techno "pas mûre"). Et copier le crédit social tant qu'ils y étaient dans les conneries.
votre avatar
Conclusions dont Retailleau & co ne tiendront aucun compte.
votre avatar
J'entends la remarque, même si factuellement, la VSA n'a donc permis de n'envoyer que 7 signaux efficients. J'ai donc rajouté une phrase dans le chapô pour préciser que "L'expérimentation aura donc eu le mérite de montrer qu'en l'état, la VSA n'est pas au point."
votre avatar
Le titre est tendancieux : c'était annoncé comme une expérimentation. Certains hurlaient déjà à la théorie du pied dans la porte, ça y est, c'était bien le signe que c'était sur le point d'être généralisé, qu'on nous prenait pour des cons.
Bah non. C'était une expérimentation, et on nous donne en toute transparence les résultats de cette expérimentation. On ne peut pas dire qu'elle n'a servi à rien : elle a servi à montrer que ce n'est pas encore au point, ce qui est une information très importante. Surtout pour ceux qui hurlent que ça va être généralisé.
votre avatar
Hum, ce n'est que la première partie de l'éventuel pied dans la porte. On va voir la suite dans les prochains mois/années. Je serai toujours pas surpris de voir un généralisation malgré des retours d'inefficacité.
C'est pas comme si depuis des années les caméras de surveillance se montraient efficaces, et pourtant elles continuent d'être installées.
La vraie efficacité pour moi reste d'avoir du personnel formé en nombre suffisant, ce que semble conforter le rapport. Mais politiquement c'est plus difficile à justifier que de virer tout le monde et d'installer du matériel cher mais qui n'apparaît pas pareil dans le budget.
votre avatar
et on nous donne en toute transparence les résultats de cette expérimentation. :non:
On parle quand même d'un rapport qui est tombé entre les mains des journalistes, pas d'un truc publié par un ministère.

Car malgré le contenu du rapport, les politiciens vont pousser pour généraliser ça. Pas pour des raisons de résultats, mais pour des raisons purement politique. (en espérant qu'un jour ça aide par hasard dans un dossier)
votre avatar
Une demande CADA et le document est disponible (plus ou moins rapidement).
votre avatar
Retex implacable qui montre que la solution est tout sauf mature et qu'elle est à abandonner au plus vite. Pire, c'est bien trop intrusif pour un résultat néant.
votre avatar
Le but étant une plus grande acceptation de la population, je trouve au contraire que cela a très bien fonctionné. C'est fait "pour notre sécurité" non ? Donc au prochain événement sans surveillance, on pourra faire une nouvelle expérimentation pour aller encore plus loin.

Aux JO de Paris, la vidéosurveillance algorithmique n’a servi à (presque) rien

  • Une « maturité technologique insuffisante »

  • Des vitrines éclairées et feux de voiture pris pour des incendies

  • Les SDF et les poubelles, des « colis suspects » comme les autres

  • Un seul cas d’usage fait l’unanimité : la détection d’intrusion

  • Un « choix politique » qui appelle à « une vigilance particulière »

Fermer