0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

OpenAI推出“集体对齐”团队,收集公众意见解决潜在偏见

微云疏影 来源:综合整理 作者:综合整理 2024-01-17 10:31 次阅读

据昨日消息,全球领先的人工智能研究机构OpenAI于当地时间本周二发布博客称,已正式成立一支名为“集体对齐”的新团队。新团队集结了一批经验丰富的研究员及工程师,现正致力于策划并实行群众观点采集环节,帮助调整及规范其人工智能模型行为,以期化解可能出现的偏颇及相关挑战。

OpenAI在博客中分享说:“我们的终极愿景是构建一套能收集并转化公众对于我们模型行为的认识的体系,以期把这些重要且细致入微的建议融入我们今后的产品和服务中,使我们的人工智能模型更趋向于与人类道德观相符。”

为此,OpenAI积极寻找具备各种技术资质的研究工程师加入新团队。他们期望与外部咨询公司加强协作,甚至开始进行创新试验,将最初版本引入我们的模型中。他们迫切需要各界专才,携手迈出这一步。

“集体对齐”团队实际上为OpenAI于去年五月份开启的公共项目的延续。这个项目致力于资助研发“民主程序”的实验,以确立人工智能系统应遵守的规则。OpenIA曾经明确表态,该项目是为了支持个人、团队以及组织研发概念验证,并在概念明确后回答关于人工智能监测与治理方面的问题。

OpenAI研究工程师、新团队创始人之一泰纳·埃伦杜(Tyna Eloundou)强调:“随着我们走向超级智能模型,这类模型必将逐步成为社会生活不可缺少的一环。因此,让公众有机会发表意见至关重要。”

举例来说,为确保仅由人类参与投票并给予评价,OpenAI正考虑与Worldcoin展开合作。Worldcoin是OpenAI首席执行官萨姆 · 阿尔特曼(Sam Altman)亲自操刀的加密货币项目,具备识别人类和人工智能机器人的独特功能。

自2022年末推出ChatGPT以来,OpenAI凭借生成性人工智能技术取得众多公众的关注。运用这种技术,简单暗示即可生成大量文字内容,使得ChatGPT成为有史以来增长速度最为迅猛的应用程序之一。

然而,人工智能技术催人不及掩耳的进步亦引起深深忧虑。尤其是其制造虚假图像及误导性信息的能力,令2024年美国总统选举临近之际,公众担心不已。多位评论家指出,如ChatGPT等人工智能系统因接受的数据成分所限而自带偏见,用户已多次发现某些人工智能软件输出显示出明显的种族主义或性别歧视倾向。

本次博客更新中,OpenAI还详尽总结了支援对象的工作成果,其中包含视频对话界面、人工智能模型众包审计平台以及“如何将信仰映射至可用于精细调整模型行为的因素”的方法。除此之外,他们也公开了所有援助对象在工作中所采纳的代码以及每个项目方案的精华摘要。

尽管 OpenAI 试图将该项目描述为与其商业利益无关,但考虑到其首席执行官阿尔特曼对欧盟人工智能监管的批评态度,这一说法似乎有些难以令人信服。阿尔特曼以及 OpenAI 总裁格雷格・布罗克曼(Greg Brockman)和首席科学家伊利亚・苏茨凯弗(Ilya Sutskever)一再强调,人工智能的创新速度非常快,以至于我们无法指望现有的权威机构能够充分控制这项技术。因此,他们提出了将这项工作众包的解决方案。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人工智能
    +关注

    关注

    1783

    文章

    45233

    浏览量

    232576
  • 模型
    +关注

    关注

    1

    文章

    2887

    浏览量

    48087
  • OpenAI
    +关注

    关注

    9

    文章

    930

    浏览量

    6101
收藏 人收藏

    评论

    相关推荐

    OpenAI推出ChatGPT大学教育版

    近日,OpenAI宣布推出了一款专为大学设计的人工智能产品——ChatGPT Edu。这款全新的AI工具旨在服务于学生、教职员工、研究人员以及校园运营,以满足他们在不同场景下的智能化需求。
    的头像 发表于 06-06 09:48 289次阅读

    OpenAI推出ChatGPT Edu,助力教育及学术领域AI应用普及

    OpenAI近日宣布推出全新服务——ChatGPT Edu,旨在推动教育机构与学术单位在人工智能领域的深入应用与发展。此举不仅彰显了OpenAI在普及AI技术方面的决心,也为广大师生及研究人员提供了强有力的技术支撑。
    的头像 发表于 06-04 09:17 301次阅读

    OpenAI 深夜抛出王炸 “ChatGPT- 4o”, “她” 来了

    当地时间5月13日OpenAI推出ChatGPT-4o,代表了人工智能向前迈出的一大步。在GPT-4turbo的强大基础上,这种迭代拥有显著的改进。在发布会的演示中,OpenAI展示该模型的高级
    发表于 05-27 15:43

    OpenAI超级对齐团队解散

    近日,OpenAI的安全主管、“超级智能对齐团队”负责人Jan Leike宣布离职。据悉,Jan Leike与OpenAI高层在公司的核心优先事项上存在长期且难以调和的分歧。
    的头像 发表于 05-20 10:16 212次阅读

    OpenAI“超级对齐团队因创始人离任而解散

    近期,OpenAI内部纷争再起。Wired报道指出,Ilya宣布离职后,该团队的另一位负责人Jan Leike亦宣布离开。目前,该团队已融入OpenAI其他研究项目之中。
    的头像 发表于 05-18 10:04 304次阅读

    微软回应中国区AI团队集体赴美

    微软针对有关其中国区AI团队集体赴美的传闻做出了回应。微软方面表示,目前确实有一小部分员工得到了可以选择国际轮岗的机会。这些员工有权利选择是否接受轮岗安排,或者选择继续留在当前的岗位工作。因此,之前关于“打包赴美”的传闻存在夸张和不实之处。
    的头像 发表于 05-17 09:57 205次阅读

    OpenAI推出ChatGPT桌面版应用程序

    OpenAI 近日宣布,备受期待的 ChatGPT 桌面版应用程序现已正式发布。在官方公告中,OpenAI 表示他们首先会将这款应用提供给 Plus 用户群体,并特别针对 macOS 系统推出。这是该公司为了满足用户对更便捷、更
    的头像 发表于 05-14 11:51 752次阅读

    OpenAI视频生成工具Sora将于年内正式向公众推出

    OpenAI的首席技术官Mira Murati在近期采访中透露,公司正计划在今年晚些时候正式向公众正式推出其视频生成工具Sora。Murati表示,尽管具体的推出时间可能需要几个月,但
    的头像 发表于 03-19 11:41 556次阅读

    谷歌AI Gemini1.5评OpenAI Sora生成视频:评价负面

    此前,两家科技巨头分别推出自家创新技术: Google Gemini 1.5 Pro与OpenAI文本视频转换工具Sora。Sora的发布时间备受瞩目,有人质疑OpenAI有意分散公众
    的头像 发表于 02-19 14:18 400次阅读

    OpenAI推出新模型Sora:文字秒变视频短片

    OpenAI行业资讯
    深圳市浮思特科技有限公司
    发布于 :2024年02月18日 16:49:39

    OpenAI推出GPT商店

    近日,人工智能领域的领军企业OpenAI正式推出了其GPT商店和ChatGPT Team服务。这一创新举措旨在为用户提供更加便捷、个性化的AI助手服务。
    的头像 发表于 01-18 15:15 440次阅读

    OpenAI组建AI价值观新团队

    近日,人工智能领域的领军企业OpenAI宣布,他们正在组建一个全新的团队,名为“集体对齐”(Collective Alignment)。这个团队
    的头像 发表于 01-17 15:00 429次阅读

    视觉模型weak-to-strong的实现

    几天前,OpenAI「超级对齐」(Superalignment)团队发布了成立以来的首篇论文,声称开辟了对超人类模型进行实证对齐的新研究方向。GPT-2能监督GPT-4,Ilya带头
    的头像 发表于 01-08 11:07 275次阅读
    视觉模型weak-to-strong的实现

    今日看点丨OpenAI考虑自研AI芯片?传已在评估潜在收购目标;印度指控小米、vivo非法转移资金,小米强烈否认

    1. OpenAI 考虑自研AI 芯片?传已在评估潜在收购目标   有媒体报道,ChatGPT开发商OpenAI正在探求自研AI芯片的可行性,甚至已经在评估潜在的收购目标。   目前
    发表于 10-07 11:04 543次阅读

    OpenAI发布第三版DALL-E

    可以使用该平台,因为有人批评DALL-E可以生成真实感的露骨图像,并在生成照片时显示出偏见。该公司于去年9月取消了候补名单,并向公众开放了DALL-E 2。
    的头像 发表于 09-25 16:39 583次阅读