学术前沿|通研院提出首个“对称现实”框架,探索智能时代人机共生新范式

本文主要是介绍学术前沿|通研院提出首个“对称现实”框架,探索智能时代人机共生新范式,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

人类正在迈入智能时代,其中一个显著特征是大量智能体的涌现。无论生物人、数字人和机器人,都是智能体的不同具身形式。为实现多种智能体在跨虚实空间的共存协作,探索人机共生的新范式,北京通用人工智能研究院(简称通研院)在IEEE VR 2024上发表了题为《On the Emergence of Symmetrical Reality》的论文,并作口头报告。

Image

文章创新性地提出了全球首个对称现实框架,用于描述各种物理-虚拟融合形式下的人机共生形态。该框架系统地分析了物理-虚拟融合的不同技术范式,深入阐述了人工智能体(特别是未来具备类人感知认知能力、能够自主决策的通用智能体)融入人类社会的各种挑战,并开发了一个原型系统以探索对称现实框架在特定任务中的具体实践路径。

该工作的论文链接、项目主页如下:

论文链接: https://arxiv.org/pdf/2401.15132.pdf

项目主页: https://sites.google.com/view/ieeevr2024sr

公众号原文链接:

学术前沿|通研院提出首个“对称现实”框架,探索智能时代人机共生新范式

Image

01 导 言

对称现实是描述人与智能体在跨虚实空间共生协作的一种理论框架,解释了AI技术高速发展所带来的新型的人机共存关系。在这个框架内,人工智能(AI)被视为原生于数字虚拟空间(或称虚拟世界)内的一种数字生命,人工智能驱动的智能体(AI Agents)则可以同时在物理世界和虚拟世界拥有各种具身形态,可具备自主的感知、认知、决策、学习、执行和社会协作能力。因此,这种智能体在感知交互结构方面,能够与人的感知交互过程相类比。这就使得智能体在存在形式、交互形态上,可以拥有与人类等同的逻辑结构。也就是说,物理世界的人类和虚拟世界的智能体,都可以在物理、虚拟世界中同时执行任务,在一定程度上形成了对称。我们将这种人机对称式存在及交互系统所呈现的现象称为对称现实(Symmetrical Reality)。

02 基本架构

Image

图1 对称现实系统拓扑结构示意图

对称现实系统中,人和智能体分属于不同的空间,但是均可在虚、实空间内活动。物理世界和虚拟世界可以看作是不同的存在形式。人类和其所生活的物理世界属于同质的(Homogeneous),但是人类和虚拟世界属于异质的(Heterogeneous) 。同理,智能体的智能一般形成于数字虚拟空间,因此智能体和虚拟世界属于同质的,但是和物理世界却属于异质的。这种本质的不同,也导致了人类和智能体(尤其是具有较高智能水平的自主智能体)在共存协作中具有迥异的表现。

03 人类兼容的AI

Image

图2 对称现实框架中的人和智能体需求示意图

谈到人机共存,一般我们会想到从需求理论出发去探讨人机之间的关系。这里我们不妨采用马斯洛的需求层次理论来描述人类需求体系,当然这并不是唯一的方式。与之对应,我们同样可以设计一个多层次的AI需求层次体系来建模智能体在人机交互中的表现。假设智能体首要的需求是能够生存下来,这支持了它可以继续做各种任务;其次是它需要有能力跟外界进行信息交互,或者执行某些动作来改变外部环境;最后,为了与人协作,它需要得到人类的信任,提升协作的表现。据此设计的AI需求层次,参考了马斯洛的分层设计方式,具备一定的典型性。当然在某些情况下,智能体可能并不需要具备需求层次,仅仅完成被编程好的任务即可。但是如果需要将其设计成自主驱动的智能体,那么设计人员便可以按照类似方法,将智能体设计成人类兼容(Human Compatible)的形式,更好地服务人类社会,这种自顶向下的设计方式也可在人机价值对齐中起到重要作用。

04 实例场景

Image

图3 逆向增强现实和逆向虚拟现实

传统的虚拟现实、增强现实都是以人为中心的研究范式,研究目标是为人类构造虚拟的或虚实融合的数字呈现。但是区别于人类的是,智能体本身就是源自于虚拟空间的,那么它对物理、虚拟空间的感知过程会和人类一样吗?这可能需要分类来看。如果仅看其在对称现实系统中的定位,那么它和人类一样,都可以在虚拟和物理空间交互,其感知过程和人类确实可以看成是类似的结构,这也是对称现实的本质特征之一,即双感知主体。但是正如前文提到的,物理世界和虚拟世界是异质的形式,所以对于智能体来说,物理世界反而是一种“remote”的东西,虚拟世界才是“local”的东西。这就决定了,如果用物理世界的元素来增强智能体的体验的话,是一种以智能体为感知中心的增强现实(Augmented Reality)形式,可以称之为逆向增强现实(Inverse Augmented Reality)。同理,以智能体为感知中心的虚拟现实,可以成为逆向虚拟现实。这些都作为对称现实体系的一些具体形式,支撑了对称现实的基本架构。

Image

图4 智能体主动服务模拟

最后,我们模拟了一个智能体为人类提供服务的场景,试图以生活化的案例来说明对称现实的基本应用方式。在该场景中,智能体在虚拟空间和物理空间有着不同的具身形态。当人类主要在物理空间活动时,智能体可以基于自己的观测信号,主动为人类提供服务(如通过机械臂、机器狗等具身组件的协同配合来帮人准备饮料;或者利用无人机这种飞行单元快速寻找家庭成员并发起主动实时通信等)。这里在模拟环境下展示了智能体为人类提供实际帮助的例子,当然,如果人类采用VR设备进入虚拟世界的话,那么虚拟世界的具身就能够以更加多样化的形态在虚拟世界为人类提供帮助,成为虚拟世界中的一个协作伙伴。

05 结 论

总之,对称现实提供了一个全新的视角来看待当下和未来的人机共生形态,也为智能体如何朝着人类兼容的方向发展提供了一个研究范式。在实际应用上,对称现实或许可以为未来的人工智能,尤其是通用人工智能的发展提供一种新思路。例如,通研院提出的首个通用智能人“通通”,在虚拟空间已经具有自主产生任务、主动帮助的能力,未来,可将“通通”的通用底座应用于各类垂直场景,以各种具身智能的形式走进千家万户,赋能千行百业。

/参考文献 /

[1] Nadikattu, R. R. (2016). The emerging role of artificial intelligence in modern society. International Journal of Creative Research Thoughts.

[2] Peng, Y., Han, J., Zhang, Z., Fan, L., Liu, T., Qi, S., ... & Zhu, S. C. (2023). The tong test: Evaluating artificial general intelligence through dynamic embodied physical and social interactions. Engineering.

[3] Lapuschkin, S., Wäldchen, S., Binder, A., Montavon, G., Samek, W., & Müller, K. R. (2019). Unmasking Clever Hans predictors and assessing what machines really learn. Nature communications, 10(1), 1096.

[4] Minsky, M. (1988). Society of mind. Simon and Schuster.

[5] Rahwan, I., Cebrian, M., Obradovich, N., Bongard, J., Bonnefon, J. F., Breazeal, C., ... & Wellman, M. (2019). Machine behaviour. Nature, 568(7753), 477-486.

[6] Zhang, Z., Zhu, Y., & Zhu, S. C. (2020, October). Graph-based hierarchical knowledge representation for robot task transfer from virtual to physical world. In 2020 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS) (pp. 11139-11145). IEEE.

这篇关于学术前沿|通研院提出首个“对称现实”框架,探索智能时代人机共生新范式的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/874079

相关文章

深入探索协同过滤:从原理到推荐模块案例

文章目录 前言一、协同过滤1. 基于用户的协同过滤(UserCF)2. 基于物品的协同过滤(ItemCF)3. 相似度计算方法 二、相似度计算方法1. 欧氏距离2. 皮尔逊相关系数3. 杰卡德相似系数4. 余弦相似度 三、推荐模块案例1.基于文章的协同过滤推荐功能2.基于用户的协同过滤推荐功能 前言     在信息过载的时代,推荐系统成为连接用户与内容的桥梁。本文聚焦于

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设

让树莓派智能语音助手实现定时提醒功能

最初的时候是想直接在rasa 的chatbot上实现,因为rasa本身是带有remindschedule模块的。不过经过一番折腾后,忽然发现,chatbot上实现的定时,语音助手不一定会有响应。因为,我目前语音助手的代码设置了长时间无应答会结束对话,这样一来,chatbot定时提醒的触发就不会被语音助手获悉。那怎么让语音助手也具有定时提醒功能呢? 我最后选择的方法是用threading.Time

智能交通(二)——Spinger特刊推荐

特刊征稿 01  期刊名称: Autonomous Intelligent Systems  特刊名称: Understanding the Policy Shift  with the Digital Twins in Smart  Transportation and Mobility 截止时间: 开放提交:2024年1月20日 提交截止日

cross-plateform 跨平台应用程序-03-如果只选择一个框架,应该选择哪一个?

跨平台系列 cross-plateform 跨平台应用程序-01-概览 cross-plateform 跨平台应用程序-02-有哪些主流技术栈? cross-plateform 跨平台应用程序-03-如果只选择一个框架,应该选择哪一个? cross-plateform 跨平台应用程序-04-React Native 介绍 cross-plateform 跨平台应用程序-05-Flutte

基于 YOLOv5 的积水检测系统:打造高效智能的智慧城市应用

在城市发展中,积水问题日益严重,特别是在大雨过后,积水往往会影响交通甚至威胁人们的安全。通过现代计算机视觉技术,我们能够智能化地检测和识别积水区域,减少潜在危险。本文将介绍如何使用 YOLOv5 和 PyQt5 搭建一个积水检测系统,结合深度学习和直观的图形界面,为用户提供高效的解决方案。 源码地址: PyQt5+YoloV5 实现积水检测系统 预览: 项目背景

Spring框架5 - 容器的扩展功能 (ApplicationContext)

private static ApplicationContext applicationContext;static {applicationContext = new ClassPathXmlApplicationContext("bean.xml");} BeanFactory的功能扩展类ApplicationContext进行深度的分析。ApplicationConext与 BeanF

数据治理框架-ISO数据治理标准

引言 "数据治理"并不是一个新的概念,国内外有很多组织专注于数据治理理论和实践的研究。目前国际上,主要的数据治理框架有ISO数据治理标准、GDI数据治理框架、DAMA数据治理管理框架等。 ISO数据治理标准 改标准阐述了数据治理的标准、基本原则和数据治理模型,是一套完整的数据治理方法论。 ISO/IEC 38505标准的数据治理方法论的核心内容如下: 数据治理的目标:促进组织高效、合理地

AI(文生语音)-TTS 技术线路探索学习:从拼接式参数化方法到Tacotron端到端输出

AI(文生语音)-TTS 技术线路探索学习:从拼接式参数化方法到Tacotron端到端输出 在数字化时代,文本到语音(Text-to-Speech, TTS)技术已成为人机交互的关键桥梁,无论是为视障人士提供辅助阅读,还是为智能助手注入声音的灵魂,TTS 技术都扮演着至关重要的角色。从最初的拼接式方法到参数化技术,再到现今的深度学习解决方案,TTS 技术经历了一段长足的进步。这篇文章将带您穿越时

MiniGPT-3D, 首个高效的3D点云大语言模型,仅需一张RTX3090显卡,训练一天时间,已开源

项目主页:https://tangyuan96.github.io/minigpt_3d_project_page/ 代码:https://github.com/TangYuan96/MiniGPT-3D 论文:https://arxiv.org/pdf/2405.01413 MiniGPT-3D在多个任务上取得了SoTA,被ACM MM2024接收,只拥有47.8M的可训练参数,在一张RTX