Élection 2024 : comment le Times calcule les moyennes des sondages

L’idée derrière une moyenne de sondage est simple : il suffit de faire la moyenne des sondages les plus récents.

La réalité est plus compliquée. La moyenne des sondages du New York Times est une moyenne pondérée, ce qui signifie qu’elle accorde plus de poids à certains sondages qu’à d’autres. Il procède également à une série d’ajustements statistiques pour tenir compte des différents biais entre les différents types d’enquêtes.

Malgré tous ces ajustements, la moyenne des sondages n’est toujours pas une prévision. Les sondages ne sont que des mesures de la situation actuelle de l’opinion publique, et une moyenne de différentes mesures reste en fin de compte une mesure – pas une prédiction.

Voici comment cela fonctionne.

Pourquoi une moyenne de sondage pondérée et ajustée ?

Les moyennes des sondages peuvent paraître simples, mais même les plus simples sont confrontées à des défis importants. Quels sondages devraient être inclus ? Quel poids devrait accorder un sondage datant de trois jours par rapport à un sondage datant de trois semaines ? Qu’en est-il des sondeurs dont les sondages penchent de manière fiable en faveur d’un parti ou d’un autre ?

Une option pour faire face à ces défis consiste à établir une moyenne simple et organisée des sondages les plus récents. L’autre option : pondérer et ajuster les sondages pour tenir compte des différences de qualité et des biais des différents sondages et sondeurs.

La moyenne simple présente l’avantage de la clarté. Il offre la réponse la plus simple à la question « Que disent les sondages ? » Mais la moyenne simple présente un inconvénient majeur : elle risque d’être inondée de sondages de mauvaise qualité ou biaisés. En conséquence, la moyenne simple n’offre peut-être pas la meilleure réponse à la question « Qui est en tête dans la course à la présidentielle ? »

La moyenne des sondages du Times adopte généralement l’approche la plus compliquée. Il pondère les sondages en fonction de divers facteurs. Il les ajuste également pour tenir compte des biais potentiels. Il y a cependant une grande limite. Cela se base uniquement sur les sondages eux-mêmes. Cela ne tient pas compte, par exemple, de la démographie d’un État ou du fait qu’un État ait voté pour le président Biden ou pour l’ancien président Donald J. Trump lors des dernières élections.

En d’autres termes, la moyenne représente une estimation de l’état de la course, basée sur les sondages – et les sondages uniquement.

Quels sondages utilisons-nous ?

Le Times utilise tous les sondages collectés par FiveThirtyEight, un site de données politiques affilié à ABC News. Les membres du personnel du Times rechercheront également les dernières enquêtes réalisées auprès de divers sondeurs.

FiveThirtyEight inclut tous les sondages qui tentent d’atteindre un échantillon représentatif de l’électorat, bien qu’il ait été abandonné quelques sociétés de sondage pour ne pas avoir respecté une norme minimale de transparence.

Lorsqu’on nous donne différentes versions des résultats des sondeurs, nous préférons les résultats parmi les électeurs probables à ceux des électeurs inscrits ou de l’ensemble des adultes. Si un sondeur publie plusieurs résultats concernant la même population et les mêmes candidats, et ne met pas clairement l’accent sur l’un par rapport aux autres, nous les faisons ensemble.

Et Kennedy ?

Ce cycle, une grande question est de savoir comment prendre en compte Robert F. Kennedy Jr., le candidat indépendant qui remporte près de 10 pour cent des voix dans les récents sondages nationaux. Il n’a pas encore été inscrit sur les listes électorales dans la plupart des États, et entre-temps, chaque sondeur fait des choix différents sur la manière de le traiter. Certains sondeurs le nomment dès la première question portant sur la course à la présidentielle. D’autres le nomment sur une deuxième question. Encore plus ne posent aucune question sur lui.

La moyenne des sondages est confrontée à deux grandes questions lorsqu’elle doit déterminer comment traiter avec M. Kennedy. La question la plus évidente est de savoir s’il faut mettre l’accent sur le résultat du scrutin direct ou sur la course à trois ou plus incluant M. Kennedy et peut-être les autres candidats des partis mineurs. A ce stade de la course, la moyenne met l’accent sur le résultat en face-à-face. C’est parce que M. Kennedy n’a pas encore eu accès au scrutin dans la plupart des États, et rien ne garantit qu’il y parviendra.

Une question moins évidente est de savoir s’il faut tenir compte des sondages qui incluent ou non M. Kennedy. Supposons, par exemple, qu’un sondeur de tendance relativement démocrate pose uniquement des questions sur la course à trois, tandis qu’un sondeur de tendance républicaine ne pose des questions que sur la course à deux. Si tel est le cas, la moyenne des sondages directs pourrait être plus favorable à M. Trump que la moyenne des trois sondages, simplement en raison du choix des sondeurs de mener l’enquête. La moyenne des sondages FiveThirtyEight effectue un tel ajustement et tente de convertir tous les sondages bidirectionnels en une course à plusieurs candidats. Ce n’est pas le cas de RealClearPolitics.

Alors que notre moyenne adopte généralement l’approche « complexe », nous empruntons ici la voie la plus simple. Nous calculons deux moyennes entièrement distinctes pour les courses à double sens et multicandidat, sans aucune tentative d’ajustement en fonction de quelle approche les sondeurs adoptent. À mesure que la course avance, les sondeurs convergeront probablement vers la solution appropriée.

Sondages de pondération

La moyenne des sondages du Times accorde plus de poids à certains sondages qu’à d’autres, en fonction des caractéristiques du sondage et de l’enquêteur.

Quatre facteurs principaux déterminent le poids qu’un sondage recevra dans la moyenne :

• Récence. Les sondages les plus récents ont plus de poids que les plus anciens. La moyenne devient plus agressive dans la pondération des données les plus récentes à mesure que les élections se rapprochent ou à la suite de congrès et de débats. L’accent est moins mis sur la récence si seuls quelques sondages de haute qualité ont récemment étudié une course.

• Taille de l’échantillon. Plus la taille de l’échantillon est grande, mieux c’est – jusqu’à environ 2 300 réponses. Au-delà de cela, les sondages ne reçoivent aucun poids supplémentaire pour la taille de l’échantillon supplémentaire.

• Le nombre de sondages récemment menée par un sondeur lors d’une course. Si un sondeur mène de nombreuses enquêtes sur la même course sur une courte période, chaque résultat du sondage recevra moins de poids. L’ensemble des sondages d’un seul sondeur ne peut jamais valoir plus qu’environ quatre enquêtes récentes dans une course.

• Le sondeur. La moyenne du Times accorde plus de poids aux enquêtes de certains sondeurs et moins de poids aux sondages d’autres sondeurs, comme décrit ci-dessous.

Pondération des sondeurs

Le poids attribué à un sondeur particulier est basé sur cinq approximations approximatives de la qualité.

• Professionnalismedéfini selon qu’un sondeur fournit des microdonnées au Roper Center ou s’il est membre de l’American Association for Public Opinion Research.

• Méthodologie, en particulier si un sondage utilise un échantillon non probabiliste ou de commodité opt-in. Un sondage a moins de poids s’il n’utilise pas, au moins en partie, une méthode plus systématique pour échantillonner la population.

• Esprit de parti. Un sondage a moins de poids s’il est parrainé par des partisans ou une campagne.

• Expérience. Un sondeur au cours de sa première année reçoit nettement moins de poids qu’un sondeur plus établi possédant les mêmes attributs.

Il est important de souligner qu’il ne s’agit que d’estimations approximatives de la qualité réelle d’un sondeur. Il existe des sociétés de sondage rigoureuses et aux résultats médiocres qui méritent d’être prises très au sérieux. Il existe des sondeurs « professionnels » ayant de bons antécédents, mais qui ne suivent toujours pas les meilleures pratiques et qui ne sont peut-être pas prêts à réussir à l’avenir. Mais historiquement, ces caractéristiques aident à prédire si un sondage sera précis et impartial à l’avenir.

« Sélectionnez les sondeurs »

Pour aider les lecteurs à comprendre d’un coup d’œil quels sondeurs ont tendance à recevoir le plus de poids dans la moyenne, certains sondeurs seront étiquetés « sondeurs sélectionnés ». Ils sont désignés par un symbole de diamant.

La désignation est basée sur le fait qu’un sondeur réponde à deux de ces trois critères :

• A un historique d’exactitude lors des récentes élections.

• Est membre d’un organisme de sondage professionnel.

• mène-t-il des sondages uniquement avec échantillons probabilistes.

Nous considérons comme des sondeurs sélectionnés les sondeurs qui répondent à au moins deux des trois critères, à condition qu’ils mènent des sondages pour des sponsors non partisans.

À proprement parler, ce n’est pas exactement la même chose que les sondages ou les sondeurs qui obtiennent le plus de poids dans la moyenne, mais c’est assez proche.

Ajustement des sondages

En fin de compte, la moyenne des sondages s’efforce de représenter ce que disent les sondages sur l’état de la course parmi les électeurs potentiels à l’approche de l’élection. Mais la plupart des sondages ne seront pas menés immédiatement avant les élections ; beaucoup ne se limitent pas aux électeurs potentiels ; et seule une poignée d’enquêteurs interrogent généralement un État particulier.

La moyenne des sondages tente de tenir compte de ces défis.

• Des électeurs probables. Après la Fête du Travail, les sondages qui rapportent les résultats des électeurs inscrits ou de tous les adultes, par opposition aux électeurs probables, sont ajustés pour tenir compte des différences entre les électeurs probables et les électeurs inscrits. L’ajustement est basé sur la différence entre les électeurs inscrits et probables dans les sondages qui ont publié les résultats pour les deux populations.

  Aujourd’hui, les sondages auprès des électeurs inscrits seraient légèrement ajustés en faveur de M. Biden, car les sondages tendent à montrer qu’il s’en sort mieux parmi ceux qui sont les plus susceptibles de voter. Lors des élections précédentes, le même ajustement avait déplacé les sondages des électeurs inscrits vers M. Trump.

• Changements dans la course. Les enquêtes plus anciennes sont ajustées pour tenir compte des changements intervenus dans la course depuis la réalisation du sondage. L’ajustement est basé sur la façon dont les sondages réalisés par le même sondeur ont évolué au fil du temps, et il devient beaucoup plus agressif à l’approche du jour du scrutin.

• Esprit de parti. Les sondages parrainés par des partisans ou des campagnes sont présumés être biaisés d’environ six points de pourcentage en faveur de leur parti, sur la base de la partialité des sondages réalisés par des entreprises comme celles-ci dans le passé.

• Tendances des sondeursparfois appelés effets de maison. La moyenne indique si les sondeurs ont un historique de tendance démocrate ou républicaine par rapport à d’autres sondages réalisés à la même époque. Si, par exemple, un nouveau sondage émane d’un organisme de sondage qui donne trois points d’avance aux démocrates par rapport aux autres sondages, il ne fera peut-être pas évoluer notre moyenne vers les démocrates à moins qu’il ne soit au moins trois points meilleur pour les démocrates que les sondages précédents.