宾夕法尼亚大学的研究人员已推出了一个AI驱动的工具,称为媒体偏置检测器旨在提供有关各种新闻媒体如何报告不同主题的详细见解。
该项目由宾夕法尼亚州计算社会科学实验室(CSSLAB)的创始人邓肯·沃茨(Duncan Watts)领导,旨在为整个意识形态范围内的媒体报道提供新的了解。

媒体偏见探测器
媒体偏见检测器允许用户从简单的下拉菜单中选择主题和出版物名称,以查看在特定时期内如何涵盖特定主题的不同新闻媒体。
例如,它可以比较《纽约时报》与唐纳德·特朗普(Donald Trump)的年龄与唐纳德·特朗普(Donald Trump)的年龄或福克斯新闻(Fox News)有关气候变化的频率与Heatwave期间的CNN相比,有关气候变化的频率。
瓦特(Watts)解释说,该工具的目的不是确定真相或确定哪些媒体更有偏见,而是量化各种出版商如何涵盖不同的主题和事件。
由于每日新闻报道的庞大数量以及阅读和分类所需的资源,跟踪这些数据的挑战非常重要。
但是,CSSLAB认识到人工智能可以增强人类研究人员的努力。借助AI,团队可以将文本分类为非常详细的水平,并测量几年前无法跟踪的各种方面。
CSSLAB的博士后研究员阿米尔·托希迪(Amir Tohidi)指出,媒体偏见探测器每天都会从主要在线新闻出版物中处理最公开的文章。
然后将这些文章馈入OpenAI的GPT-4,以通过主题对文章进行分类,并在句子级别分析每个文章的语气。该工具评估每个句子的音调是正,负或中性的。
此外,AI将文章的整体政治归类为民主党/共和党范围,并将媒体格局绘制为实时。
人类反馈
人类反馈已纳入系统,以确保媒体偏置探测器的准确性。 Microsoft的一名杂物研究员,CSSLAB成员珍妮·王(Jenny Wang)解释说,他们使用了验证过程,研究助理审查了AI的文章摘要并进行必要的调整。
这种人类的方法有助于验证AI的性能。研究小组报告说,将AI系统的产出与专家人类评估者的输出进行了比较,例如具有媒体和政治专业知识的博士生。
根据CSSLAB的数据科学家Yuxuan Zhang的说法,AI结果与人类评估之间的相关性非常高。在某些任务中,据报道,GPT-4的表现优于人类的表现,使研究人员对AI的可靠性有信心。
媒体偏见探测器最终提供了一个新的机会,可以理解偏见在媒体中表现出的微妙方式。 Wang指出,尽管每个人都对不同发布者的倾向有自己的意识,但该工具是第一个分析所有数据的工具,从而使大规模分析成为可能。
“我们的目标不是裁定是真实的,甚至是更有偏见的人,”瓦特在新闻稿中说。 “我们的目标是量化不同的主题和事件如何被不同的出版商涵盖,以及揭示其优先事项的内容。”
