在 538，我们认为选举季期间我们工作的很大一部分是探索和解释您应该对所有告诉您谁将获胜的人给予多大的信任。考虑到他们产生的数据量以及媒体和公众对数据的贪婪胃口，其中包括民意调查机构，他们比其他任何人都更重要。这就是为什么我们会做一些事情，比如发布民意调查准确性和透明度的评级，并建立复杂的选举预测模型，以探索如果民意调查与历史上的差距如此之大会发生什么。
民意调查对于我们在 538 所做的报告也很重要，它植根于经验主义和数据。此外，我们获得的舆论数据的质量不仅对于预测选举结果和政治新闻报道很重要，而且对于我们民主进程的许多其他部分也很重要。
可以这么说，如果民意调查变得或多或少准确，公众需要知道。现在 2024 年的选举已经成为过去，我们可以先粗略地看看民意调查的准确性如何。
在我们开始之前，请注意一下范围：在本文中，我将广泛了解民意调查在结果为最终或接近最终结果的州的表现。这意味着我们还不会评估全国民意调查的准确性，因为加州和其他计票速度较慢的州还剩下多少选票需要计票，也不会评估个别民意调查机构的准确性，而我们将在明年春天我们会更新我们的民意调查评级。
2024 年民意调查：低误差，中等偏差
尽管媒体上流传着早期的说法，但 2024 年对于民意调查来说是相当不错的一年。根据 538 对在竞争激烈的州*进行的民意调查的分析，截至 11 月 8 日东部时间上午 6 点，超过 95% 的预期选票已计入，竞选活动过去三周进行的平均民意调查与选举结果相差甚远。仅 2.94 个百分点。在七个主要摇摆州（除去亚利桑那州，该州的报告率尚未达到 95%），民调机构的表现甚至更好：他们仅落后 2.2 个百分点。
我们将这一指标称为“统计误差”，它衡量的是每个州的民意调查的偏差程度，而不考虑民意调查是否系统性地高估了对某一候选人的支持率。按照这个指标，2024 年的州级民调误差实际上是至少 25 年来的最低水平。相比之下，2016 年和 2020 年的州级民意调查平均误差接近 4.7 个百分点。即使在民意调查和选举预测方面都表现出色的 2012 年，民意调查仍比选举结果落后了 3.2 个百分点。
在这个早期关头，我们只能推测为什么今年的错误率如此之低。一个原因可能是民意调查机构大多不再使用随机数字拨号进行民意调查，这种民意调查最近往往会产生比其他方法更剧烈的结果。 Selzer 是一位仍然使用 RDD 的著名民意调查者 在今年爱荷华州的最终民意调查中，副总统卡马拉·哈里斯领先当选总统唐纳德·特朗普 3 个百分点。特朗普最终以约 13 个百分点的优势赢得了该州的胜利，造成了 16 个百分点的误差。塞尔泽的民意调查看起来可能有太多的民主党人和受过大学教育的选民，由于塞尔泽的理念是“不让（她的）肮脏的手接触数据”（公平地说，这个公司通常不会尝试纠正这些因素）直到今年，这种方法一直非常有效；Selzer 是 538 民意调查机构评级中排名最高的民意调查机构之一）。
同样使用 RDD 的昆尼皮亚克大学也进行了民意调查，各州之间似乎并不一致，尽管他们最终比塞尔泽更接近结果。与此同时，其他以前使用 RDD 的著名民意调查机构现在已经停止使用该方法。其中包括 ABC News，该报在发布 RDD 民意调查后发现，现任总统乔·拜登 2020 年在威斯康星州领先特朗普 17 个百分点（该调查背后的民意调查人员在发布时正确地识别为异常结果），现在消息来源它的民意调查来自益普索(Ipsos)，该民意调查通过邮件和电话随机招募受访者进行在线民意调查。
另一个因素是民意调查机构越来越多地在人口和政治变量上平衡他们的样本，例如个人在上次选举中召回的投票。虽然这可能会导致一些奇怪的结果，但它通常会稳定民意调查，并且产生的异常值比仅凭随机机会预期的要少。
根据我们的初步调查结果，使用这种积极的建模方法的民意调查者的错误率低于其他民意调查者。虽然这只是一个松散的代理，但当我们进行更彻底的分析时，我们发现民意调查人员使用在线概率小组进行调查，通过机器人电话采访人们，或者将短信或电话作为更大的混合模式的一部分抽样设计倾向于使用更复杂的加权方案（并且特别依赖于召回投票），并且比使用更多不干涉模式的民意调查者的误差更低：
但消息并不全是好消息。虽然民意调查在历史上表现良好 错误，他们的成绩为中等到差 统计偏差，它衡量民意调查是否错过了同一方向的结果。根据我们的计算，在竞争激烈的州，州民意调查对哈里斯的支持率平均高估了 2.7 个百分点。
这低于 2016 年和 2020 年民意调查的统计偏差，分别低估了特朗普 3.2 和 4.1 个百分点。但它高于 2000 年、2004 年、2008 年和 2012 年选举的偏差。
对于民意调查者来说这不是个好消息。这意味着他们没有完全解决2016年和2020年获得足够特朗普支持者参加民意调查的问题。尽管民意调查机构更积极地对数据进行加权或改进抽样设计，这些问题可能已经得到缓解，但它们显然仍然存在。如果你看看 2016 年至 2024 年竞争性州的民意调查偏差模式，你就能真正看到这一点：
尽管从 2020 年到 2024 年，民意调查机构成功减少了一些州（尤其是威斯康星州）的偏见，但该行业的模式仍然相同：民意调查机构很难接触到支持特朗普的人类型。
您应该预料到轮询会出现错误
虽然民意调查行业的偏见令人不安，但这并不一定是意外的——尤其是在最近几次选举之后。值得重复的是，从历史上看，3分球失误确实很小。政治民意调查机构设计了一种工具，平均可以衡量数亿人的民意，其误差在其“真实”值（将选票差距转换为选票份额）的 1.5% 以内。当你这样想时，你会发现民意调查如此准确确实很了不起。
2020 年大选之后，美国民意调查机构面临着自 1980 年以来最差的表现，美国民意研究协会（民意调查机构和调查研究人员的专业协会）向试图预测 2022 年和 2024 年选举结果的人们发出了警告。 “民意调查经常被误解为精确的预测，”它说。 “在选前民意调查中，重要的是通过将民意调查结果与其精确度联系起来来强调不确定性……大多数选前民意调查缺乏预测半势均力敌的竞选结果所需的精确度。”
换句话说，民意调查根本无法胜任在势均力敌的竞选发生之前决定其结果的任务。在这种情况下，考虑到民意调查固有的不确定性，候选人之间的差距太小，观察者无法得出某一候选人可靠领先的结论。
让我们将这一警告放在 2024 年选举的背景下。乍一看，可能是 似乎 就像民意调查今年表现不佳一样，因为民调显示选举结果势均力敌，而特朗普看起来将在选举人团选举中以 312 比 226 获胜。但正如我上周所写，由于他在阳光地带摇摆州领先，并在宾夕法尼亚州打平，民调根本不需要低估特朗普，他就能赢得选举。而且，我警告说，如果他们低估他 2 分——与历史上其他失误相比，这会很小——他可能会横扫所有七个摇摆州。
嗯，看起来确实是这样。事实上，这是我们最终预测的模态结果。 AAPOR 的警告在今天比以往任何时候都更加重要。
关键词：文章,115652118
