Pour en finir avec les sondages (2)

Cet article propose une analyse critique des sondages préélectoraux TNS-Sofres du 18 avril et CSA des 18 et 19 avril avril.

Sondage TNS-Sofres

La fiche technique du sondage évoque succinctement la méthode utilisée :

Enquête UNILOG réalisée le 18 avril 2006 pour Le Grand Jury RTL, Le Figaro et LCI auprès d'un échantillon national de 1000 personnes représentatif de l'ensemble de la population âgée de 18 ans et plus, inscrite sur les listes électorales, interrogées par téléphone. Méthode des quotas (sexe, âge, profession du chef de ménage PCS) et stratification par région et catégorie d'agglomération.
TNS-Sofres

Les résultats sont présentés sous la forme de cinq tableaux :

1. L'intérêt pour l'élection.
2. Intentions de vote au 1er tour.
3. Intentions de vote 2nd tour de l'élection présidentielle.
4. Les transferts de voix du 1er au 2nd tour.
5. Les motivations du vote.

Cette présentation est critiquable sur trois points :

1. Il manque les questions correspondants aux tableaux 2, 3 et 4. Il est impossible de comprendre une réponse si on ne connaît les termes exacts de la question. Ou, pour le dire autrement, la réponse est "non", mais quelle est la question ?

2. Il manque la méthode de construction des tableaux 2 et 4, qui croisent des données issues vraisemblablement de plusieurs questions. Il est donc impossible d'interpréter correctement ces tableaux.

3. La présentation des résultats du tableau 3 est biaisée, car elle exclue les 14% des personnes interrogées qui n'ont pas exprimé d'intentions de vote. Les scores annoncés de Ségolène Royal et de Nicolas Sarkozy ne représentent que 86% de l'échantillon. De plus, l'organisme de sondage n'indique pas l'intervalle de confiance. Se situant à plus ou moins 3,5%, il est supérieur à l'écart entre les deux candidats. En clair, cela signifie qu'il n'est pas possible de dire, à partir des hypothèses de ce sondage, quel candidat l'emporterait.

C'est pourtant ce qu'affirme le résumé de l'organisme qui a réalisé ce sondage :

Avec 51% d'intentions de vote, Ségolène Royal l'emporterait au 2ème tour de l'élection présidentielle face à Nicolas Sarkozy (49%). Autre enseignement de notre étude : au 1er tour, Ségolène Royal ferait un meilleur candidat PS (34% des intentions de vote) que Lionel Jospin (23%), Jack Lang (22%), Dominique Strauss-Kahn (18%) et Laurent Fabius (15%).
TNS-Sofres

C'est aussi ce qu'affirment dans les mêmes termes Le Monde et Le Nouvel Observateur :

Selon un sondage publié jeudi 20 avril dans Le Figaro, Ségolène Royal devancerait très légèrement Nicolas Sarkozy au second tour de l'élection présidentielle, avec 51% des intentions de vote, contre 49%. 14% des personnes interrogées ne se prononcent pas sur cet éventuel duel entre la députée des Deux-Sèvres et le président de l'UMP.
Au premier tour, la présidente de la région Poitou-Charente arriverait déjà en tête, avec 34% d'intention de vote, contre 30% en faveur du ministre de l'intérieur (18% des sondés ne se sont pas exprimés).
Selon ce premier baromètre TNS Sofres-Unilog, Mme Royal distance tous les "présidentiables" socialistes : Lionel Jospin (23%), Jack Lang (22%), Dominique Strauss-Kahn (18%) et Laurent Fabius (15%).
Le Monde du 20 avril.

Selon un sondage publié jeudi 20 avril par Le Figaro, Ségolène Royal avec 51% des intentions de vote devancerait très légèrement Nicolas Sarkozy (49%) au second tour de l'élection présidentielle. 14% des personnes interrogées ne se prononcent pas.
Toujours selon le quotidien, la présidente de la Région Poitou-Charente, qui devance nettement les ténors du PS, arriverait déjà en tête du premier tour avec 34% d'intention de vote contre 30% en faveur du ministre de l'Intérieur (18% ne se sont pas exprimés).
Ségolène Royal devance ainsi tous les "présidentiables" socialistes: Lionel Jospin (23%), Jack Lang (22%), Dominique Strauss-Kahn (18%) et Laurent Fabius (15%).
Le Nouvel Observateur du 20 avril.

Sondage CSA

La fiche technique du sondage évoque succinctement la méthode utilisée :

Sondage exclusif CSA / LE PARISIEN / AUJOURD'HUI EN FRANCE / I-TELE réalisé par téléphone les 18 et 19 avril 2006.
Echantillon national représentatif de 878 personnes inscrites sur les listes électorales, constitué d'après la méthode des quotas (sexe, âge, profession du chef de ménage), après stratification par région et catégorie d'agglomération.
CSA

Les résultats sont présentés sous la forme de deux tableaux :

1. Intentions de vote au 1er tour entre 9 candidats avec rappel de sondages de mars et avril 2006.
2. Intentions de vote 2nd tour entre Ségolène Royal et Nicolas Sarkozy avec rappel de sondages de mars et avril 2006.

Cette présentation est critiquable sur trois points :

1. La présentation des deux tableaux est biaisée, car elle exclut les 38% (tableau 1) et 35% (tableau 2) des personnes interrogées qui n'ont pas exprimé d'intentions de vote (abstention, vote blanc ou nul).

2. Le rappel de sondages antérieurs ne veut rien dire, car comme le précise l'organisme en bas de page et en caractères rouges : «ces résultats doivent être interprétés comme des rapports de force à la date de l'enquête, et en aucun cas comme prédictifs des résultats le jour du vote». Il est donc illégitime de comparer des résultats établis à des dates différentes.

3. Dans le tableau 2, les scores de Ségolène Royal et de Nicolas Sarkozy ne représentent que 65% de l'échantillon. De plus, l'organisme de sondage n'indique pas l'intervalle de confiance. Se situant à plus ou moins 4,5%, il est dans la fourchette de l'écart entre les deux candidats. En clair, cela signifie qu'il n'est pas possible de dire, à partir des hypothèses de ce sondage, quel candidat l'emporterait.

C'est pourtant ce qu'affirment exactement dans les mêmes termes Yahoo! et Le Nouvel Observateur :

Un nouveau sondage donne Ségolène Royal victorieuse d'un duel contre Nicolas Sarkozy: la députée socialiste battrait le président de l'UMP au second tour de l'élection présidentielle avec 53% des voix, contre 47% à son adversaire de droite.
Yahoo! du 23 avril.

Un nouveau sondage donne Ségolène Royal victorieuse d'un duel contre Nicolas Sarkozy: la députée socialiste battrait le président de l'UMP au second tour de l'élection présidentielle avec 53% des voix, contre 47% à son adversaire de droite.
Le Nouvel Observateur du 24 avril.

Pour en finir avec les sondages préélectoraux

La présentation de ces deux sondages comporte le même biais méthodologique : certaines données concernent la totalité de l'échantillon et d'autres seulement une fraction du même échantillon sans que l'organisme n'indique ce changement. Or, dans les sondages préélectoraux, il y a 95 chances sur 100 pour qu'une enquête effectuée sur 1000 personnes donne un résultat à plus ou moins 3,2% près, donc 5 chances sur 100 pour que le résultat soit hors de l'intervalle, c'est-à-dire faux. De plus la marge d'erreur augmente quand la taille de l'échantillon diminue (plus ou moins 3,5% dans le premier sondage et plus ou moins 4,5% dans le deuxième). Rien donc ne permet de dire lequel des deux candidats l'emporterait au deuxième tour.

En toute rigueur, la seule conclusion de ces sondages devrait s'écrire : si les candidats du premier tour et si les deux candidats du deuxième tour étaient exactement les mêmes que ceux sélectionnés par le sondeur et si le premier et le deuxième tour des élections avaient lieu le jour de l'enquête, il y a 95% de chances pour que les intentions de vote en faveur de tel candidat soient dans une fourchette comprise entre x% et y% et il y a 5% de chances que le résultat annoncé soit faux. Pas très vendeur n'est-ce pas ?

La lecture des différentes conditions, cachées par les organismes de sondage et les médias, révèlent des biais méthodologiques qui invalident les résultats :

La liste des candidats du premier et du deuxième tour, soumis au choix des personnes interrogées, est totalement arbitraire. Le sondeur définit la problématique de son sujet pour ensuite demander au sondé de choisir l'option qui lui convient le plus. Cette construction de l'objet est une excellente méthode pour obtenir des résultats correspondant à ses propres attentes : le duel du deuxième tour.

Le sondeur définit une problématique temporelle totalement fictive, car le deuxième tour d'une élection se déroule une semaine après le premier. Ce temps permet aux deux candidats, sélectionnés par le comptage des votes réels et non des intentions fictives, de faire campagne et à chacun de faire son choix, y compris de ne pas choisir. Ces deux sondages sont construits sur la seule question du deuxième tour.

Bien que les sondages préélectoraux ne mesurent que des intentions de vote à un instant donné, plus ou moins éloigné de l'élection, ils sont abusivement commentés comme un système prédictif. Le 20 avril, Le Nouvel Observateur titre «2007 : Royal favorite au second tour» et Le Monde, «Un nouveau sondage donne Ségolène Royal victorieuse face à Nicolas Sarkozy à la présidentielle» ; et le 24 avril, Le Nouvel Observateur titre «Sondage : Royal écrase Sarkozy en 2007».

En utilisant les chiffres comme un argument d'autorité, les organismes de sondage et les médias ne s'embarrassent pas de nuances pour vendre leurs prophéties. Ils utilisent toutes les ficelles de mise en scène des telenovelas pour construire LE feuilleton de l'année. Les personnages changeront au fil des épisodes, mais le suspense restera entier jusqu'à la fin. Ce filon est juteux pour ces manipulateurs de l'opinion, qui cherchent à nous faire croire que leur petit jeu stérile a du sens.

Serge LEFORT
28 avril 2006