财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态秦皇岛市某某自控阀门培训中心问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经秦皇岛市某某自控阀门培训中心音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:时尚)
-
北京时间9月19日晚,和PRADA一起在米兰穿越未来。在这个充满挑战与不确定性的时代,PRADA女装时装秀再次以一种晦涩却又令人深思的方式展现对历史的迷恋与对未来的探索,秀场在PRADA米兰基金会举办 ...[详细]
-
当地时间7月12日,美国国务院发布声明表示,对哈基曼·沙尔格研究公司Hakiman Shargh Research Company)实施制裁。声明称该公司涉嫌参与伊朗化学武器研发。总台记者 张颖哲 ...[详细]
-
萝卜快跑订单疯涨?Robotaxi商业化提速 会取代网约车吗?
原标题:萝卜快跑订单疯涨?Robotaxi商业化提速,会取代网约车吗?) 真正的无人驾驶出行模式已渐行渐近。无人驾驶概念持续受市场关注,多股再涨停。7月10日,W ...[详细] -
本周7月1日至5日)A股继续盘整,上证指数全周下跌0.59%,收于2949.93点。深证成指、创业板指全周分别下跌1.73%、1.65%。从盘面上看,行业申万一级)指数表现较上周有所回暖,商贸零售、钢 ...[详细]
-
陈乔恩Alan的婚礼现场超级浪漫,尤其是在新人誓词的时候,真的是很感人!整个婚礼可以用温馨浪漫来形容,亲友们围成一团坐在花棚之中,见证这一对新人的神圣时刻。明道,郑元畅,七朵花的姐妹团们一起与新娘新郎 ...[详细]
-
欧盟加征关税后,特斯拉中国产Model 3 在德国等地涨价约1500欧元
IT之家 7 月 11 日消息,特斯拉汽车于当地时间周三表示,在欧盟对中国制造的电动汽车加征关税后,公司已将其 Model 3 汽车在法国、德国、意大利、希腊、波兰、西班牙、瑞典等欧盟国家的售价提高了 ...[详细] -
这里有地表温度超过80℃的极热体验,有葡萄沟里上百种酸甜可口的葡萄,这里每年游客接待量两三千万人次。 这个全国最热的地方,有极致的风情,有温柔的古城,也是新疆之险、新疆之奇的代言。 ...[详细]
-
2024年6月1日起,我国的《非法定计量单位限制使用管理办法》开始正式施行。管理办法明确,国家实行法定计量单位制度,国际单位制计量单位和国家选定的其他计量单位为国家法定计量单位。早在1875年5月20 ...[详细]
-
愿为巴萨复出!已退役的41岁布拉沃:若巴萨致电我,我会做好准备
直播吧09月23日讯 41岁的智利传奇门将克劳迪奥-布拉沃告知阿拉伯媒体winwin,自己愿意为巴萨复出。布拉沃:“如果巴萨给我打电话,我会做好准备。”巴萨主力门将特尔施特根遭遇右膝髌腱完全断裂的重伤 ...[详细] -
美国当地时间7月10日,AMD宣布签署最终协议,以全现金方式收购欧洲最大的私人人工智能实验室Silo AI,交易价值约为6.65亿美元。Silo AI首席执行官兼联合创始人Peter Sarlin将继 ...[详细]