0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

OpenAI推出“集体对齐”团队,收集公众意见解决潜在偏见

微云疏影 来源:综合整理 作者:综合整理 2024-01-17 10:31 次阅读

据昨日消息,全球领先的人工智能研究机构OpenAI于当地时间本周二发布博客称,已正式成立一支名为“集体对齐”的新团队。新团队集结了一批经验丰富的研究员及工程师,现正致力于策划并实行群众观点采集环节,帮助调整及规范其人工智能模型行为,以期化解可能出现的偏颇及相关挑战。

OpenAI在博客中分享说:“我们的终极愿景是构建一套能收集并转化公众对于我们模型行为的认识的体系,以期把这些重要且细致入微的建议融入我们今后的产品和服务中,使我们的人工智能模型更趋向于与人类道德观相符。”

为此,OpenAI积极寻找具备各种技术资质的研究工程师加入新团队。他们期望与外部咨询公司加强协作,甚至开始进行创新试验,将最初版本引入我们的模型中。他们迫切需要各界专才,携手迈出这一步。

“集体对齐”团队实际上为OpenAI于去年五月份开启的公共项目的延续。这个项目致力于资助研发“民主程序”的实验,以确立人工智能系统应遵守的规则。OpenIA曾经明确表态,该项目是为了支持个人、团队以及组织研发概念验证,并在概念明确后回答关于人工智能监测与治理方面的问题。

OpenAI研究工程师、新团队创始人之一泰纳·埃伦杜(Tyna Eloundou)强调:“随着我们走向超级智能模型,这类模型必将逐步成为社会生活不可缺少的一环。因此,让公众有机会发表意见至关重要。”

举例来说,为确保仅由人类参与投票并给予评价,OpenAI正考虑与Worldcoin展开合作。Worldcoin是OpenAI首席执行官萨姆 · 阿尔特曼(Sam Altman)亲自操刀的加密货币项目,具备识别人类和人工智能机器人的独特功能。

自2022年末推出ChatGPT以来,OpenAI凭借生成性人工智能技术取得众多公众的关注。运用这种技术,简单暗示即可生成大量文字内容,使得ChatGPT成为有史以来增长速度最为迅猛的应用程序之一。

然而,人工智能技术催人不及掩耳的进步亦引起深深忧虑。尤其是其制造虚假图像及误导性信息的能力,令2024年美国总统选举临近之际,公众担心不已。多位评论家指出,如ChatGPT等人工智能系统因接受的数据成分所限而自带偏见,用户已多次发现某些人工智能软件输出显示出明显的种族主义或性别歧视倾向。

本次博客更新中,OpenAI还详尽总结了支援对象的工作成果,其中包含视频对话界面、人工智能模型众包审计平台以及“如何将信仰映射至可用于精细调整模型行为的因素”的方法。除此之外,他们也公开了所有援助对象在工作中所采纳的代码以及每个项目方案的精华摘要。

尽管 OpenAI 试图将该项目描述为与其商业利益无关,但考虑到其首席执行官阿尔特曼对欧盟人工智能监管的批评态度,这一说法似乎有些难以令人信服。阿尔特曼以及 OpenAI 总裁格雷格・布罗克曼(Greg Brockman)和首席科学家伊利亚・苏茨凯弗(Ilya Sutskever)一再强调,人工智能的创新速度非常快,以至于我们无法指望现有的权威机构能够充分控制这项技术。因此,他们提出了将这项工作众包的解决方案。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人工智能
    +关注

    关注

    1797

    文章

    47867

    浏览量

    240857
  • 模型
    +关注

    关注

    1

    文章

    3372

    浏览量

    49316
  • OpenAI
    +关注

    关注

    9

    文章

    1172

    浏览量

    6783
收藏 人收藏

    评论

    相关推荐

    OpenAI即将推出GPT-5模型

    OpenAI首席执行官奥尔特曼近日宣布了一项重要消息:OpenAI将在今年未来几个月内推出全新的GPT-5模型。这一消息引起了业界的广泛关注和期待。 据了解,GPT-5模型将整合OpenAI
    的头像 发表于 02-13 11:21 253次阅读

    OpenAI推出o3满血版

    OpenAI联合创始人萨姆・阿尔特曼(Sam Altman)透露,未来几周,OpenAI将正式推出其备受期待的o3满血版。这一消息无疑为AI领域注入了新的活力。 在此之前,OpenAI
    的头像 发表于 02-05 15:53 134次阅读

    Encode提交意见书支持马斯克阻止OpenAI营利化

    转型为营利性公司所提出的禁令请求。 Encode作为一个专注于AI安全与伦理的非营利机构,对AI技术的发展及其潜在风险有着深入的理解和关注。在意见书中,Encode详细阐述了其对于OpenAI转型可能带来的安全及伦理问题的担忧,
    的头像 发表于 12-30 14:05 839次阅读

    Lilian Weng加入Fellows Fund Fellow团队

    近日,前OpenAI研究与安全副总裁Lilian Weng(翁荔)宣布了一项重要的职业变动。她已正式加入硅谷知名投资机构Fellows Fund的Fellow团队,担任Distinguished
    的头像 发表于 12-09 14:37 348次阅读

    高级顾问宣布离职!OpenAI解散“AGI筹备”团队

    近日,OpenAI宣布解散其“AGI筹备”团队,该团队主要负责向公司提供关于人工智能发展的战略建议,以及评估全球对该技术的准备情况。这一消息引起了业界的广泛关注。 AGI筹备团队的高级
    的头像 发表于 10-29 15:16 415次阅读

    安全政策遭质疑 OpenAI解散AGI团队

    前不久OpenAI决定解散专注于AI的长期风险的“超级对齐团队(Superalignment team),现在又突发AGI团队解散事件。OpenA
    的头像 发表于 10-25 11:19 598次阅读

    OpenAI推出ChatGPT大学教育版

    近日,OpenAI宣布推出了一款专为大学设计的人工智能产品——ChatGPT Edu。这款全新的AI工具旨在服务于学生、教职员工、研究人员以及校园运营,以满足他们在不同场景下的智能化需求。
    的头像 发表于 06-06 09:48 576次阅读

    OpenAI 深夜抛出王炸 “ChatGPT- 4o”, “她” 来了

    当地时间5月13日OpenAI推出ChatGPT-4o,代表了人工智能向前迈出的一大步。在GPT-4turbo的强大基础上,这种迭代拥有显著的改进。在发布会的演示中,OpenAI展示该模型的高级
    发表于 05-27 15:43

    OpenAI超级对齐团队解散

    近日,OpenAI的安全主管、“超级智能对齐团队”负责人Jan Leike宣布离职。据悉,Jan Leike与OpenAI高层在公司的核心优先事项上存在长期且难以调和的分歧。
    的头像 发表于 05-20 10:16 519次阅读

    OpenAI“超级对齐团队因创始人离任而解散

    近期,OpenAI内部纷争再起。Wired报道指出,Ilya宣布离职后,该团队的另一位负责人Jan Leike亦宣布离开。目前,该团队已融入OpenAI其他研究项目之中。
    的头像 发表于 05-18 10:04 605次阅读

    微软回应中国区AI团队集体赴美

    微软针对有关其中国区AI团队集体赴美的传闻做出了回应。微软方面表示,目前确实有一小部分员工得到了可以选择国际轮岗的机会。这些员工有权利选择是否接受轮岗安排,或者选择继续留在当前的岗位工作。因此,之前关于“打包赴美”的传闻存在夸张和不实之处。
    的头像 发表于 05-17 09:57 438次阅读

    OpenAI推出ChatGPT桌面版应用程序

    OpenAI 近日宣布,备受期待的 ChatGPT 桌面版应用程序现已正式发布。在官方公告中,OpenAI 表示他们首先会将这款应用提供给 Plus 用户群体,并特别针对 macOS 系统推出。这是该公司为了满足用户对更便捷、更
    的头像 发表于 05-14 11:51 1103次阅读

    OpenAI视频生成工具Sora将于年内正式向公众推出

    OpenAI的首席技术官Mira Murati在近期采访中透露,公司正计划在今年晚些时候正式向公众正式推出其视频生成工具Sora。Murati表示,尽管具体的推出时间可能需要几个月,但
    的头像 发表于 03-19 11:41 1000次阅读

    OpenAI推出新模型Sora:文字秒变视频短片

    OpenAI行业资讯
    深圳市浮思特科技有限公司
    发布于 :2024年02月18日 16:49:39