0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于人工智能视觉问答技术的人机协作数字孪生模型仿真方案

电子设计 来源: 数字孪生DigitalTwin 作者:王田副教授 2020-12-08 12:33 次阅读

作为实现智能制造、工业4.0、工业互联网和智能城市的一种技术和手段,数字孪生(Digital twin)正迅速引起学术界和工业界的关注并被逐渐应用。数字孪生是以数字化的方式建立多空间尺度、多时间尺度、多物理实体的多维动态虚拟模型来仿真真实环境中的属性、行为和性能等。目前,基础的数字孪生模型通常为最初定义的三维模型,即物理实体、虚拟实体以及它们之间的联系。随着物联网、大数据、人工智能等新信息技术的发展,数字孪生在向着基于物联网的集成、虚拟实体与实体的互联等方向发展。通过大数据分析方法和人工智能的深入结合,融合多源异构数据,支持虚拟数据与真实数据的连接,数字孪生模型可以提供智能决策。这一进展为实时仿真和优化创造了可能,从而提供了按需智能服务。

本研究旨在结合人工智能中的视觉问答技术,将数字孪生模型应用于人机协作任务上。如图1所示,用于人机协作的数字孪生模型由五部分组成:物理系统、虚拟系统、服务系统、数据库和各部分间的交互。物理系统中包括每个物理实体,人类和机器是重要的组成部分,此外,还考虑了加工的产品、加工设备、周围环境信息等。速度、能量、温度、湿度、压力等数据可直接由传感器从材料、设备和环境中采集,人类的行为、状态、意图则以摄像、语音或计算及外部输入设备等方式进行获取。上述数字信息共同构成了人机协作的数字孪生模型中的虚拟系统。然后,在服务系统中,应用人工智能技术,对系统中的视觉信息、自然语言信息和传感器信息进行综合分析、建模、表征和预测,其结果进一步补充至虚拟系统。最后,虚拟系统对现实世界中的人类、机器进行反馈,从而形成完整的数字孪生闭环系统。

图1 数字孪生五维模型示意图

结合视觉问答技术,现实的物理世界在虚拟系统中进行演化,其演化结果进一步反馈并影响现实世界,过程如图2所示。举例来说,如果采用新的策略对生产线进行改造,则可以首先在数字孪生系统中对生产过程进行仿真。用数字孪生模型模拟人类、机器及其相互作用。例如,如果将产品的尺寸改为较小的尺寸,则可能会调整相机的位置、传感器参数以获得清晰的图像和数据。同时,模型的结构和参数也可能需要调整。如果在数字孪生模型中新的策略得到成功的测试,那么就可以在实际的生产环境中进行部署。

图2 人机协作(HMC)流程示意图

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人工智能
    +关注

    关注

    1791

    文章

    46853

    浏览量

    237549
  • 人机协作
    +关注

    关注

    0

    文章

    44

    浏览量

    6126
  • 数字孪生
    +关注

    关注

    4

    文章

    1280

    浏览量

    12206
收藏 人收藏

    评论

    相关推荐

    嵌入式和人工智能究竟是什么关系?

    、连接主义和深度学习等不同的阶段。目前,人工智能已经广泛应用于各种领域,如自然语言处理、计算机视觉智能推荐等。 嵌入式系统和人工智能在许多方面都存在密切的关联性。首先,嵌入式系统可
    发表于 11-14 16:39

    数字孪生智能建筑中的使用

    ,是一种集成了物联网(IoT)、大数据、云计算和人工智能技术的综合性解决方案。它通过收集物理实体的数据,创建一个精确的虚拟模型,这个模型
    的头像 发表于 10-25 14:43 283次阅读

    risc-v在人工智能图像处理应用前景分析

    RISC-V和Arm内核及其定制的机器学习和浮点运算单元,用于处理复杂的人工智能图像处理任务。 四、未来发展趋势 随着人工智能技术的不断发展和普及,RISC-V在人工智能图像处理领域的应用前景将更加广阔。以下
    发表于 09-28 11:00

    数字孪生智慧校园解决方案

    数字孪生智慧校园解决方案是当今教育领域的前沿技术创新,融合了数字孪生
    的头像 发表于 07-05 16:54 456次阅读

    人工智能模型有哪些

    人工智能(Artificial Intelligence, AI)作为21世纪最具影响力的技术之一,正以前所未有的速度改变着我们的生活、工作乃至整个社会结构。AI模型作为AI技术的核心
    的头像 发表于 07-04 17:28 759次阅读

    Google开发专为视频生成配乐的人工智能技术

    近日,科技巨头Google旗下的人工智能研究实验室DeepMind宣布了一项引人注目的技术突破——V2A技术(Video to Audio),这是一项专为视频生成配乐的人工智能技术。这
    的头像 发表于 06-20 11:03 481次阅读

    数字孪生场景构建的未来发展

    工业制造、城市规划、医疗保健、农业等。随着数字孪生技术的不断发展和应用,未来数字孪生场景将呈现出以下发展趋势: 1.
    的头像 发表于 06-11 14:57 293次阅读
    <b class='flag-5'>数字</b><b class='flag-5'>孪生</b>场景构建的未来发展

    数字孪生场景构建的技术和优势

    随着科技的进步,数字孪生面向智慧交通、园区、城市、建筑、应急等领域的客户,提供行业解决方案数字孪生是以
    的头像 发表于 05-22 16:48 267次阅读
    <b class='flag-5'>数字</b><b class='flag-5'>孪生</b>场景构建的<b class='flag-5'>技术</b>和优势

    “暴走”的人工智能,为智慧城市供能

    未来城市将会呈现怎样的面貌?人工智能将如何为智慧城市赋能?随着《深圳市数字孪生先锋城市建设行动计划(2023)》的颁布,建设“数实融合、同生共长、实时交互、秒级响应”的数字
    的头像 发表于 05-14 16:29 737次阅读
    “暴走”<b class='flag-5'>的人工智能</b>,为智慧城市供能

    5G智能物联网课程之Aidlux下人工智能开发(SC171开发套件V2)

    Aidlite-SDK模型推理 https://v2.docs.aidlux.com/sdk-api/aidlite-sdk/aidlite-python 人工智能 5G AIoT技术实践入门与探索_V2 59分
    发表于 05-10 16:46

    星云数字与普强信息在人工智能领域开展合作 共推大模型技术革新

    近日,南京星云数字技术有限公司(下称“星云数字”)与普强信息技术(北京)有限公司(下称“普强信息”)达成战略合作。双方将在人工智能尤其是生成
    的头像 发表于 04-12 19:10 1098次阅读

    数字孪生关键技术及体系架构

    摘要:  数字孪生以各领域日益庞大的数据为基本要素,借助发展迅速的建模仿真人工智能、虚拟现实等先进技术,构建物理实体在虚拟空间中的
    的头像 发表于 04-02 14:21 720次阅读

    5G智能物联网课程之Aidlux下人工智能开发(SC171开发套件V1)

    软件使用 11分46秒 https://t.elecfans.com/v/25507.html *附件:AidLux平台使用介绍.pdf 人工智能 AIMO模型优化平台介绍 2分20秒 https
    发表于 04-01 10:40

    嵌入式人工智能的就业方向有哪些?

    联网ARM开发 NB-IoT开发及实战 七:python工程师,人工智能工程师 python语法基础 python核心编程 基于OpenCV的机器视觉开发 嵌入式人工智能渗入生活的方方面面,广泛应用
    发表于 02-26 10:17

    浅谈基于数字孪生的配电室关键技术研究

    出现问题时才能发现故障。数字孪生为这些难题的解决提供了新途径。“数字李生”是利用人工智能、传感和模拟工具等数字
    发表于 01-09 15:49