lundi 10 avril 2017

La prédictivité des Big Data en échec

Prédictivité, dis-moi tout
La victoire de ceux que les prédictions basées sur les Big Data prévoyaient perdants: le Brexit, Donald
Trump, pour prendre les exemples les plus fameux, font réfléchir !

Les Big Data se trompent-elles ?

Ce sont ceux qui les interprètent qui se trompent ?
La mise en récit (le storytelling) qui traduit les analyses de données en langage courant pour orienter des décisions ou des actions ne fonctionne plus ?

Pourquoi ?



Big Data : usine à fantasmes et lutte entre des façons de les utiliser (et des intérêts opposés) ?


Big Data is watching you
Comme beaucoup de technologies émergentes, les Big Data ont une dimension magique.
Internet, un rêve de liberté et d'information réalisé ?

Il est vrai que leur développement exponentiel est surréaliste et crée, de fait, une nouvelle dimension de la connaissance. (Voir mon article :"Le Big Data une nouvelle façon de percevoir les réalités")

Le premier ressenti du développement de cette nouvelle connaissance; c'est "Big data, Big Brother ?".

Sentiment d'être espionné et qu'on peut décider de notre sort sans qu'on ne puisse rien faire.

Il est vrai que les programmes automatiques (les algorithmes) mis en place ont de quoi inquiéter :
"Les algorithmes: amis ou ennemis ?".

Pour autant, la surveillance qui s"étend sur nous a un revers qui est un avantage pour les surveillés: ils peuvent surveiller à leur tour !

Cela s'appelle la "sousveillance" qu'on peut définir comme: « Sousveiller, c'est observer avec une attention soutenue [à partir de la conception, de l'expérimentation, de la pratique, du vécu] par des acteurs indépendants de liens financiers ou hiérarchiques »
(Voir mon article "Qu'est-ce que la sousveillance ?").

Big Data vous surveillent

Après ce rappel, quoi de nouveau au-delà de ces "erreurs" monumentales de prédiction 

Ce ne sont pas que des "erreurs" !

Parce qu'elles ébranlent la croyance même qu'il est possible de prévoir correctement, beaucoup de spécialistes:

  • avouent leur incompétence alors même qu'hier; ils plastronnaient dans leur rôle d'expert "qui-sait-tout".
  • se voient obligés de se poser la question: "pourquoi ce que nous prévoyions si bien hier devient imprévisible aujourd'hui ?"

L'explication scientifique de l'indétermination par la physique quantique:
Physique quantique

La physique de Newton, stable et constante facilitait la prédiction de la marche du monde.

Le principe d'indétermination ou principe d'incertitude d'Heisenberg, en physique quantique a ouvert la voie à la reconnaissance scientifique de l'imprévisibilité. (Wikipédia)

(Je ne saurai vous en expliquer plus).

L'explication plus factuelle de Bison Futé

Depuis 1976, le ministère des Transports fournissait l'information routière prévisionnelle et temps réel ainsi que les itinéraires de délestages sous le nom de "Bison Futé".

En effet, le weekend du 15 août 2015 a vu un chaos indescriptible sur les routes de France avec 2,5 millions de conducteurs qui rentraient chez eux alors que 4,5 descendaient sur les plages.
60.000 véhicules bloqués, à l'arrêt et 600 km de bouchons à 11h du matin.

L'année 2016, Bison Futé, par ses conseils,a réduit de 73% le nombre d'heures perdues.

Au fil des années, l'efficacité de Bison Futé s'est rapidement dégradée.
Bison Futé
Pourquoi ?
  • parce que le modèle retenu pour les calculs (par exemple l'année 2009), 6 ans plus tard est chamboulé par les habitudes des automobilistes, leurs capacités financières à partir en vacances. 
  • les RTT et aménagements d'horaires donnent de nouvelles souplesses
  • à cause de gros accidents imprévus
  • les évolutions des destinations
  • les évolutions des moyens de transport
Ce qui signifie que les prévisions ont besoin d'informations récentes et de prises en compte d’événements et d'évolutions incessantes.

Autrement dit, on ne prévoit qu'en prolongeant ce qu'on sait déjà.

Mais un autre phénomène a pris complètement de court Bison Futé

Bison Futé a été suivi par les automobilistes comme par ceux qui vérifient les prédictions météorologiques.

"Nous avons eu l'idée de nous inspirer de ces méthodes [météorologie]...puisque le comportement de l'automobiliste (par exemple son degré de suivi aux conseils de Bison Futé)... rend incertaine la prévision de l'état du trafic.

En fait, le comportement des automobilistes est influencé par l'idée qu'il se fait de la véracité de la prédiction de Bison Futé.

Mais aussi, et c'est là que cela devient à la fois intéressant et complexe, l’automobiliste a son propre raisonnement prédictif sur le comportement des autres automobilistes:

Il sait que tout le monde est informé que la pointe des bouchons se situera à l'heure x.
Et il pourra justement choisir de partir quand même à cette heure en pensant que les autres automobilistes, informés, changeront leur heure de départ.

On voit que l’information n'est pas unidirectionnelle, mais qu'au contraire, le comportement des personnes informées peuvent, à leur tour changer le déroulement des faits et fausser la prévision.

Et la philosophie de l'histoire, en conclusion ?
Dis-moi l'avenir

"Pourquoi tout peut arriver? en tout..." explique Hélène Jouan dans sa chronique de France Inter qui m'a décidé à écrire cet article et dont je me suis beaucoup inspiré. (Je vous incite à la lire ou à l'écouter)

Elle conclut que la conclusion philosophique serait paradoxalement:

 "Mieux on connait la position actuelle d'un individu ou d'un collectif, moins on sait quel acte il va commettre":

Exemple: Facebook qui connait mieux que quiconque les pensées exprimées ou cachées de ses très nombreux utilisateurs (près de 200 millions aux USA pour 330 millions d'habitants environ) a été incapable de prévoir la victoire de Trump !

En fait, les individus, informés d'une prévision, construisent leur propre stratégie, que ce soit dans les domaines électoraux si imprévisibles aujourd'hui qu'ailleurs.

Le réel échappe ainsi aux prévisions, dépasse celles-ci en s'en servant.

La liberté réapparaît et s'impose.
Voilà au moins une conclusion optimiste pour contrer la crainte générée par l'incertitude !