财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态宿州市某某国际贸易服务中心问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经宿州市某某国际贸易服务中心音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:娱乐)
-
版权声明:本文版权为网易汽车所有,转载请注明出处。网易汽车10月2日报道 日前,奇瑞集团公布9月份销售数据,共计交付汽车244534辆,同比增长28.6%。其中,出口109048辆,同比增长20.6% ...[详细]
-
河北邯郸一小客车与两辆电动车碰撞后冲至路边超市门口,致1死2伤
图为百姓关注微博截图据“平安永年”官微消息,2024年9月2日18时许,我区洺李线与西苏路口发生一起交通事故。肇事司机游某某驾驶一辆小型客车,因操作不当与两辆电动车发生碰撞后,冲至路边超市门口。事故造 ...[详细] -
新华社北京9月3日电 生态环境部3日发布消息,经中美双方商定,美国总统国际气候政策高级顾问波德斯塔将于9月4日至6日访华,与中国气候变化事务特使刘振民共同主持召开“21世纪20年代强化气候行动工作组” ...[详细]
-
中央气象台9月1日06时继续发布高温黄色预警: 预计9月1日白天,陕西中南部、山东西南部、河南、安徽、江苏南部、湖北、湖南、江西、浙江、福建东南部和西北部、四川中东部、重庆、贵州东部、广西东北部 ...[详细]
-
【太平洋汽车 行业频道】日前,特斯拉发布了2024年第三季度生产与交付报告:第三季度,特斯拉全球生产469796辆电动车,交付462890辆电动车,创今年新高。今年以来累计交付约130万辆电动车。 ...[详细]
-
近日,四川乐山一名女检察官通过网络实名举报法检系统多人枉法,引发关注。9月1日,红星新闻记者多方了解发现,该举报背后牵涉一起撤销离婚登记行政案。据当事女检察官刘某某发布的视频自述,前夫何某某与自己登记 ...[详细]
-
当地时间9月5日下午,巴勒斯坦伊斯兰抵抗运动哈马斯)发布哈马斯政治局成员兼加沙停火和人员交换协议谈判代表团团长哈利勒·哈亚的公开讲话,重申应在保证加沙地带全面停火的前提下达成交换被扣押人员协议。 ...[详细]
-
来源:西湖发布 某演出团队部分成员腹泻事件初步调查情况通报 2024年8月31日上午,杭州市西湖区食品药品安全委员会办公室接区疾控中心报告,浙江医院三墩院区陆续接诊18例腹泻病例,均为某演出团 ...[详细]
-
财联社9月29日讯编辑 夏军雄)美东时间周六9月28日)下午,美国太空探索技术公司SpaceX)的“龙”飞船搭乘猎鹰9号火箭从佛州卡纳维拉尔角太空军基地发射升空,搭载了两名宇航员飞往国际空间站。Spa ...[详细]
-
8月13日,东升派出所接到一景区员工报警,有人在小区微信群,造谣景区有6名员工患有艾滋病,对该景区形象造成了负面影响。 接警后,东升派出所民警迅速开展工作,8月14日,民警锁定了嫌疑人曾某,并将 ...[详细]