0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

对ai3种不同的智商类型提出对应的测试方法和数学公式

mK5P_AItists 2017-12-21 09:31 次阅读

前言:本文是未来智能实验室关于人工智能智商的最新研究文章,主要提出智能系统的智能水平会因为测试目的的不同,产生三种不同的智商类型,针对这三种AI智商,本文也提出对应的测试方法和数学公式。

我们在研究中发现,人类在讨论AI的智能发展水平时,需求和目的并不相同,由此在评估AI智商时也会出现差异,第一个目的和需求是评判当前的AI系统(或机器人)是否在智力上超越人类 ,第二个需求和目的是了解一个智能产品在服务人类时,究竟有多么聪明,和要付出多少价格。根据这一关键区别,未来智能实验室提出AI系统应该存在三种智商,分别是通用智商、服务智商和价值智商。

0.背景

伴随着2016年AlphaGo战胜人类围棋冠军李世石,世界范围人工智能迅猛发展,人工智能威胁论也因此广泛传播,同时智能产品蓬勃发展,不断涌现。人工智能究竟能不能超越人类?这些智能产品的智能究竟达到什么水平?回答这些问题都需要用定量的方法测试智能系统的发展水平。

从1950年图灵测试提出以来,科学家已经为人工智能发展的评价体系做了很多工作。1950年,图灵提出了著名的图灵实验,采用提问和人类裁判的方法,判断一台计算机是否具有同人相当的智力。作为最被广泛应用的人工智能测试方法,但图灵测试并不检验Ai的智能发展水平,只是判断智能系统能否与人类智能相同,而且受人为因素干扰太多,严重依赖于裁判者和被测试者的主观判断,因此往往有人在没有得到严格验证的情况下宣称其程序通过图灵测试,

2015年3月24日“美国科学院院刊(PNAS)发表一篇论文,提出一种新的图灵测试方法“Visual Turing test” ,这种测试方法用来对计算机的图像认知能力进行更为深入的评估。

2014年美国佐治亚技术学院的瑞德教授(Mark O. Riedl)认为,智能的本质在于创造力。他设计了一个叫做Lovelace 2.0 版本的测试。Lovelace 2.0 的测试范围包括:创作有虚拟故事的小说、诗歌创作、油画和音乐等。

在解决人工智能定量测试的问题上,包括图灵测试在内的各种方案还存在两个问题:第一,这些测试方法没有形成统一的智能模型,并以此为基础进行分析,区分智能的多个分类。导致无法将不同的智能系统包括人类进行统一的测试;第二是这些测试方法无法定量分析人工智能,或者只定量分析智能的某个方面,但这个系统究竟达到人类智慧的百分之多少,发展速度与人类智慧发展速度比率如何,这些问题在上述研究中没有涉及。

针对这些问题,研究团队提出:根据评测目的的不同,智能系统的智能水平评估存在三种智商,分别是:智能系统的通用智商,服务智商和价值智商。这三种智商的理论基础,详细定义和评测方法将在以下内容中做详细阐述。

1.理论基础:标准智能系统和扩展的冯诺依曼架构

对智能系统包括人类和人工智能系统的智力能力进行评测面临两个重要挑战:第一,人工智能系统目前没有形成统一的模型;第二,人工智能系统与以人类为代表的生命体之间的比较目前没有统一的模型。

针对这一问题,2014年 ,中科院虚拟经济与数据科学研究中心同时也是未来智能实验室研究团队成员,刘锋,石勇,刘颖参考冯·诺伊曼结构、戴维·韦克斯勒人类智力模型、知识管理领域DIKW模型体系等。提出“标准智能模型”,统一描述人工智能系统和人类的特征和属性,将任何一个智能体视为一个具有“知识的获取,掌握,创新和反馈”的系统。

对ai3种不同的智商类型提出对应的测试方法和数学公式

基于这个模型与冯诺依曼架构结合,可以形成扩展的冯诺依曼架构,相比冯诺依曼架构,这个模型增加了创新创造功能,即能够根据已有的知识,发现新的知识元素和新的规律,使之进入到存储器,供计算机和控制器使用,并通过输入/输出系统与外部进行知识交互。第二个增加的是能够进行知识共享的外部知识库或云存储器,而冯·诺伊曼架构的外部存储只为单一系统服务。扩展的冯诺依曼架构在构建AI的智商中将起到重要的作用。

对ai3种不同的智商类型提出对应的测试方法和数学公式

2.智能系统三种不同智商的定义

2.1 AI通用智商的提出

基于标准智能模型,研究团队建立AI智商测试量表,分别与2014年和2016年对包括谷歌、Siri、百度、Bing等50多个人工智能系统和6岁,12岁和18岁人群进行AI智商测试。从测试结果看,谷歌、百度等人工智能系统的性能比两年前已有大幅提高,但仍与6岁儿童有一定差距.

对ai3种不同的智商类型提出对应的测试方法和数学公式

应该说上述AI智商测试是为了解决AI能否超越人类智能这个问题而开展的,这个研究是将每一个智能系统包括机器人,AI软件系统,人类,动物和其他生物当做平等的智能体,观察其与自然界,其他智能体在交互中显示出来的智能水平。

对ai3种不同的智商类型提出对应的测试方法和数学公式

AI通用智商的定义如下:基于标准智能模型,为了解决“评价各智能系统发展水平高低”的问题,将各智能系统视为平等的智能体,通过统一的AI智商测试量表形成的智能评测分数,可以称为AI系统的通用智商 Artificial intelligence General intelligence quotient (AI G IQ)。

2.2. AI服务智商的提出

在实践中,我们发现除了少数AI系统的产生是出于科学实验目的,不为人类提供辅助性服务,其他大多数AI系统是为了更好的服务于人类而被制造出来,它的智能也主要体现在为人类服务的过程中,智能水平越高,也就能更好的为人类提供服务。

对ai3种不同的智商类型提出对应的测试方法和数学公式

这种情况下,如果用AI的通用智商标准进行评测,就明显与产品的最初被制造出来的目的有重大差异。这就需要我们根据此类AI系统的特点,基于标准智能模型,选择与服务相关的指标进行评测,

这些指标与AI的通用智商评测指标有相关性,但又有比较大的差异。包括对人工智能的法律,伦理道德等约束条件也应该放在智能系统服务智商中。而不用放在智能系统的通用智商中。

AI服务智商的定义:基于标准智能模型,为了回答“智能系统如何才是更好的服务于人类”的问题,对智能产品在服务过程中体现的智能水平进行测试,并形成的智能评测分数,可以称为AI系统的服务智商,Artificial intelligence seveice intelligence quotient (AI S IQ)。

2.3.AI价值智商提出

为人类提供服务或支撑性工作的AI系统,往往会由不同的公司和企业提供相应的智能产品,例如智能音箱就有亚马逊、百度等品牌,智能聊天机器人包括科大讯飞、苹果Siri等,由于是由不同企业生产制造,完成相同或相近功能,每个企业的造价或售价也会不同,服务智商与成本或价格关联会对消费者购买智能产品产生重要的影响。

对ai3种不同的智商类型提出对应的测试方法和数学公式

AI价值智商的定义:基于标准智能模型,为了帮助使用者判断需要用多大经济代价获得智能系统的智力能力, 将智能系统的服务智商除以该系统的出售价格,形成的智能评测分数,可以称为AI系统的价值智商,Artificial intelligence Value intelligence quotient (AI V IQ)。

3.智能系统通用智商和服务智商的测试量表设计。

3.1.智能系统通用智商的测试量表

为了解决AI能否超越人类智慧的问题,2014年开始,本文研究者根据标准智能模型把智能分为“知识的获取,掌握,创新和反馈”四类能力,在这四类之下又分成15个小分类能力,从更多维度评测AI,人类的智能。这15个小分类是:图像、文字、声音的识别和输出,常识、计算、翻译、排列,创作、挑选、猜测、发现等能力,每个小分类有不同的权重。

2017年,根据人工智能的发展和对智能的最新研究。研究团队将AI通用智商评测量表从测试分类和分类权重进行调整,主要调整的内容增加了:1.识别动态图像的能力,2.情绪的识别与表达能力,3.识别敌我的能力,4.伪装真实意图的能力,5.实现移动定位的能力,6.实现改造世界的能力。除此之外对常识和创作的测试也做了更为细化的工作。

对ai3种不同的智商类型提出对应的测试方法和数学公式

令智能系统的通用智商为IQAIG,FGi是二级评价指标项得分,WGi是二级评价指标项的权重,N是评价指标项的个数。因此智能系统的通用智商公式如下:

3.2.智能系统的服务智商测试量表

目前存在大量智能系统,例如聊天机器人,智能化的搜索引擎,智能音箱,智能手机,智能汽车,智能洗衣机,智能冰箱等,它们大部分是作为商品服务于人类的某一需求,这些智能系统可以称为智能产品。

在标准智能系统和扩展的冯诺依曼架构下,提炼他们共同的智能特征,并根据不同的服务需求,形成如下智能系统服务智商的测试量表。在这个服务智商的测试量表中主要突出了以下几个方面.

1.感知周围智能系统和使用者身份的能力

2.与互联网云端交互的能力

3.将自身内部状况实时显示给使用者,出现故障给予支持的能力

4.按符合当地法律和伦理道德服务人类的能力

5.危险情况下保护使用者和其他人的能力

6.自身能源使用和自动补充的能力

对ai3种不同的智商类型提出对应的测试方法和数学公式

智能系统的服务智商为IQAIS,FSi是二级评价指标项得分,WSi是二级评价指标项的权重,N是评价指标项的个数。因此智能系统的服务智商公式如下:

作为一个智能产品服务智商的标准量表,为了尽量全面的覆盖不同种类的智能产品,在设计智能产品服务智商测试量表时,在测试量表中从知识的获取,掌握,创新和反馈四个方面为同智能产品留下接口

  1. 在知识的获取分类中增加了”其他”信息输入方式,用来评估智能产品在知识输入方面的新方式。

  2. 在知识的掌握中,增加了“专业常识”,用来评估不同领域智能产品的专业方面技能,

  3. 在知识的输出能力中,增加其他输出能力,用来评估智能产品在知识输出方面的新方式。

3.3 AI价值智商的形成方法

根据智能系统AI价值智商(AIVIQ)的定义,如果该智能系统通过出售变为产品服务于人类,令智能系统的服务智商为AISIQ,该智能产品的公开售价为P,形成智能系统价值智商的公式如下:

IQAIV=(IQAIS/p)*100

4.总结

通过AI三种智商认为,智能系统根据不同的使用和评测目标,可以有三种不同的智能水平评测方法和由此得出的三种智商:AI通用智商,AI服务智商和AI的价值智商,其中AI的通用智商已在2014年以来的论文中进行深入研究,也通过AI系统和人类的共同评测,分析了谷歌,SiRi,百度等与人类通用智商的差异。

本文新提出的AI服务智商和AI的价值智商为评测智能产品的智能水平提供了理论分析和实现方法。后续工作将基于AI服务智商量表,面向具体的智能产品,如智能音箱,智能手机,智能汽车,智能洗衣机,智能电冰箱等,开展他们的AI通用智商、服务智商和AI价值智商的评测工作。

未来智能实验室是人工智能学家与科学院相关机构联合成立的人工智能,互联网和脑科学交叉研究机构。由互联网进化论作者,计算机博士刘锋与中国科学院虚拟经济与数据科学研究中心石勇、刘颖教授创建。

未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网(城市)云脑研究计划,构建互联网(城市)云脑技术和企业图谱,为提升企业,行业与城市的智能水平服务。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    28825

    浏览量

    266158
  • 人工智能
    +关注

    关注

    1787

    文章

    46026

    浏览量

    234864

原文标题:如何测量智能产品的AI智商水平,论AI的三种智商 |未来研究

文章出处:【微信号:AItists,微信公众号:人工智能学家】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    高中数学公式大全

    高中数学公式大全1. 元素与集合的关系2.德摩根公式 3.包含关系4.容斥原理5.集合 的子集个数共有  个;真子集有 –1个;非空子集有  –1个;非空的真子集
    发表于 01-25 08:53

    让你在不看任何数学公式的情况下理解傅里叶分析

    错过这篇文章,可能你这辈子不懂什么叫傅里叶变换了这篇文章的核心思想就是:要让读者在不看任何数学公式的情况下理解傅里叶分析。
    发表于 09-27 12:40

    FOC有哪些数学公式

    在学习FOC控制前,我对于FOC控制完全不懂,只知道中文叫做磁场定向控制,因公司产品开发需要用到对永磁同步电机(PMSM)进行精确的位置控制,才开始从网上了解什么是FOC,有哪些数学公式,控制的过程是怎么样的,但由于公司没有人知道这一块的知识,所以只能一个人慢慢找...
    发表于 08-27 07:53

    高等数学公式大全

    高等数学公式大全有大学高数公式大全、高等数学公式大全、高等数学公式大全、高等数学积分公式大全和高
    发表于 07-01 08:58 0次下载
    高等<b class='flag-5'>数学公式</b>大全

    数学公式编辑器 V3.1

    电子发烧友网站提供《数学公式编辑器 V3.1.EXE》资料免费下载
    发表于 08-15 19:11 47次下载

    高等数学公式大全

    高等数学公式大全,包括常用的函数公式,定理,以及一些微积分公式
    发表于 01-06 11:19 0次下载

    数学公式编辑器

    数学公式编辑器
    发表于 01-05 17:46 4次下载

    数学公式帮助自动驾驶司机规避风险

    麻省理工学院计算机与人工智能实验室和Delft大学认知机器人实验室聚集在一起,创建了一个数学公式,可以帮助自动驾驶司机留意不可预测的危险。
    的头像 发表于 12-10 14:40 2699次阅读

    MathType7.4数学公式编辑器应用程序免费下载

    MathType数学公式编辑器是一个强大的数学公式编辑器,能与常见的文字处理软件和演示程序配合使用,能够在各种文档中加入复杂的数学公式和符号,帮助用户快速建立专业化的数学技术文档。
    发表于 12-11 17:49 19次下载

    数学公式:可帮助5G网络有效共享通信频率

    美国国家标准技术研究院(NIST)的研究人员已经开发出一种数学公式,计算机仿真表明,该公式可以帮助5G和其他无线网络选择和共享通信频率,其效率比试错法高大约5000倍。
    的头像 发表于 06-28 16:05 3105次阅读

    数学公式和电磁理论分析PCB产品的特性和原理

    传统上,EMC一直被视为黑色魔术(black magic)。其实,EMC是可以藉由数学公式米理解的。不过,纵使有数学分析方法可以利用,但那些数学方程式对实际的EMC电路设计而言,仍然太
    发表于 07-09 10:29 0次下载
    由<b class='flag-5'>数学公式</b>和电磁理论分析PCB产品的特性和原理

    特性阻抗的数学公式和各种参数详细概述

    的介绍里,总是成片的数学公式和各种参数,以及几句聊胜于无的文字介绍,实在令人沮丧。于是本文,我们尝试用一更为直观的方式来做一下阐释。首先我们要明确,在今天的RF /微波系统中使用50欧姆或者75欧姆是人为的选择。其实比如说像
    发表于 10-23 10:41 3次下载
    特性阻抗的<b class='flag-5'>数学公式</b>和各种参数详细概述

    基于Transformer与覆盖注意力机制建模的手写数学公式识别

    手写数学公式识别是将包含数学表达式的图像转换为结构表达式,例如LaTeX数学表达式或符号布局树的过程。手写数学表达式的识别已经带来了许多下游应用,如在线教育、自动评分和
    的头像 发表于 11-01 15:26 1513次阅读

    如何在Arduino UNO上实现数学公式

    电子发烧友网站提供《如何在Arduino UNO上实现数学公式.zip》资料免费下载
    发表于 06-13 09:42 0次下载
    如何在Arduino UNO上实现<b class='flag-5'>数学公式</b>

    高斯如何得到他理论的结果?聊聊高斯概率分布的数学公式

    这个模拟世界中的各种物理过程都表现出一定程度的随机性,例如,请想想噪声。高斯概率分布(Gaussian probability distributions)描述了许多噪声过程,我们应该看看它的数学公式
    的头像 发表于 07-17 10:21 853次阅读
    高斯如何得到他理论的结果?聊聊高斯概率分布的<b class='flag-5'>数学公式</b>