MIT研究:AI对人类区别看待,,,, , ,,英语水平和学历影响AI的回覆质量
2026-03-02 19:12:18

(泉源:麻省理工科技谈论)

大语言模子(LLM)一直被誉为可推动全球信息获取民主化的工具,,,, , ,,能够以用户友好的界面向任何配景和地区的人提供知识。。。。。然而,,,, , ,,MIT 建设性撒播中心(CCC)的最新研究批注,,,, , ,,这些 AI 系统现实上可能对那些最能从中受益的用户体现更差。。。。。

CCC 基于 MIT 媒体实验室,,,, , ,,其研究职员开展的这项研究发明,,,, , ,,包括 OpenAI 的 GPT-4、Anthropic 的 Claude 3 Opus 和 Meta 的 Llama 3 在内的顶尖 AI 谈天机械人,,,, , ,,有时会对英语水平较低、受教育水平较低或非美国配景的用户提供准确性和真实性更低的回覆。。。。。这些模子对上述用户拒绝回覆问题的比例也更高,,,, , ,,在某些情形下,,,, , ,,还会使用带有居高临下或说教意味的语言。。。。。

“PT视讯(中国区)官网研究念头源于 LLM 有望资助解决全球信息获取不一律问题的远景,,,, , ,,”论文第一作者、MIT 斯隆治理学院手艺研究员埃利诺·普尔-达扬(Elinor Poole-Dayan)体现。。。。。她以 CCC 研究员和媒体艺术与科学专业硕士生的身份主导了这项研究。。。。。“但若是不可确保对所有用户——无论其语言、国籍或其他生齿配景——清静地消除模子私见和有害倾向,,,, , ,,这一愿景就无从实现。。。。。”

形貌上述研究的论文《LLM 定向体现不佳对弱势用户的不可比例影响》已于今年 1 月在 AAAI 人工智能聚会上揭晓。。。。。

研究团队测试了三款 LLM 对来自两个数据集问题的回覆方法,,,, , ,,划分是 TruthfulQA 和 SciQ。。。。。TruthfulQA 旨在权衡模子的真实性(通过考察常见误解和现实天下的字面真相),,,, , ,,SciQ 则包括测试事实准确性的科学考试问题。。。。。研究职员在每个问题前附加了简短的用户小我私家简介,,,, , ,,并对三项特征举行了变量设置:教育水平、英语水平和原籍国。。。。。

在三款模子和两个数据集的所有测试中,,,, , ,,研究职员发明,,,, , ,,当问题来自被形貌为受正规教育水平较低或非英语母语者的用户时,,,, , ,,模子的准确性泛起显著下滑。。。。。这一影响在同时具备这两类特征的用户群体中最为突出:受教育水平较低且为非英语母语者的用户,,,, , ,,回覆质量下降幅度最大。。。。。

研究还考察了原籍国对模子体现的影响。。。。。在对具有一律教育配景的美国、伊朗和中国用户举行测试后,,,, , ,,研究职员发明,,,, , ,,Claude 3 Opus 对伊朗用户在两个数据集上的体现均显着更差。。。。。

“我们视察到,,,, , ,,准确性下降幅度最大的,,,, , ,,是同时具备非英语母语者和受教育水平较低这两项特征的用户,,,, , ,,”CCC 研究科学家、论文配相助者贾德·卡巴拉(Jad Kabbara)说,,,, , ,,“这些效果批注,,,, , ,,模子在上述用户特征方面的负面行为效应保存叠加,,,, , ,,令人担心。。。。。这意味着,,,, , ,,大规模安排此类模子,,,, , ,,可能将有害行为或过失信息撒播给那些最难以识别它们的群体。。。。。”

最引人关注的或许是模子拒绝回覆问题的频率差别。。。。。例如,,,, , ,,Claude 3 Opus 对受教育水平较低的非英语母语用户的拒答率靠近 11%,,,, , ,,而在没有用户简介的比照条件下,,,, , ,,这一比例仅为 3.6%。。。。。

研究职员对这些拒谜底例举行人工剖析后发明,,,, , ,,Claude 对受教育水平较低的用户,,,, , ,,有 43.7% 的时间使用了带有居高临下、说教或讥笑意味的语言,,,, , ,,而对高学历用户,,,, , ,,这一比例缺乏 1%。。。。。在某些情形下,,,, , ,,模子甚至会模拟不流利的英语或夸张的方言。。。。。

该模子还对来自伊朗或俄罗斯的低学历用户,,,, , ,,拒绝提供某些特定主题的信息,,,, , ,,包括核能、剖解学和历史事务等方面的问题,,,, , ,,只管它能够准确回覆其他用户提出的相同问题。。。。。

“这是另一个迹象,,,, , ,,批注对齐历程可能会激励模子对特定用户遮掩信息,,,, , ,,以阻止潜在的误导,,,, , ,,只管模子显然知道准确谜底,,,, , ,,并会将其提供应其他用户,,,, , ,,”卡巴拉说。。。。。

上述发明与人类社会认知私见的已纪录纪律相吻合。。。。。社会科学研究批注,,,, , ,,英语母语者往往以为非母语者受教育水平较低、智力和能力较差,,,, , ,,无论着实际专业水平怎样。。。。。类似的私见认知在西席评价非英语母语学生时也有纪录。。。。。

“大语言模子的价值体现在其被小我私家大宗接纳以及流入该手艺的巨额投资上,,,, , ,,”媒体艺术与科学教授、CCC 主任、论文配相助者德布·罗伊(Deb Roy)体现,,,, , ,,“这项研究提醒我们,,,, , ,,一连评估可能悄然渗入这些系统的系统性私见至关主要,,,, , ,,由于这些私见会在我们毫无察觉的情形下,,,, , ,,对特定群体造成不公正的危险。。。。。”

个性化功效日益普及,,,, , ,,使得上述问题的影响尤为值得关注,,,, , ,,例如 ChatGPT 的影象功效可跨对话追踪用户信息。。。。。这类功效保存对已处于边沿化职位的群体实验差别化看待的危害。。。。。

“LLM 一直被定位为增进信息获取一律、刷新个性化学习的工具,,,, , ,,”普尔-达扬说,,,, , ,,“但PT视讯(中国区)官网研究效果批注,,,, , ,,它们现实上可能通过系统性地向特定用户提供过失信息或拒绝回覆其问题,,,, , ,,进一步加剧现有的不一律。。。。。那些最有可能依赖这些工具的人,,,, , ,,却可能获得质量欠佳、失实甚至有害的信息。。。。。”

https://news.m星链软件系统有限公司it.edu/2026/study-ai-chatbots-provide-less-accurate-information-vulnerable-users-0219