当前位置:首页 > 休闲 > 财经观察:提升人机交互效率 多模态大模型易用性进一步推进

财经观察:提升人机交互效率 多模态大模型易用性进一步推进

2024-11-11 08:28:49 [探索] 来源:深圳市某某建材维修网点

人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态福建某某建材厂问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。

北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经福建某某建材厂音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进

一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。

模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。

作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。

发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。

米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”

此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。

国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。

多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。

米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。

据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。

OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。

(责任编辑:时尚)

推荐文章
  • 中美执法部门合作侦办高某某案

    中美执法部门合作侦办高某某案   据新华社北京11月8日电记者熊丰)记者8日从公安部获悉,近期,公安部部署湖北省公安机关对美方通报的涉高某某线索开展工作,依法对高某某男,38岁)等人立案侦查。经查,高某某等人利用国家间化学品管制差 ...[详细]
  • 红旗飘飘!祖国各地官兵举行升旗仪式共庆节日

    红旗飘飘!祖国各地官兵举行升旗仪式共庆节日   今天是八一建军节。在祖国各地的座座军营,官兵们隆重举行升旗仪式,以军人特有的方式庆祝中国人民解放军建军97周年。  在清晨的薄雾中,以南昌命名的万吨大驱首舰南昌舰官兵集结于飞行甲板,以重温军人誓词 ...[详细]
  • 解锁夏令营,好玩又好学

    解锁夏令营,好玩又好学 解锁夏令营,好玩又好学 | 健康过暑假2024-07-31 14:15:21 来源:健康中国微信公众号 作者 ...[详细]
  • 爆冷!持副拍上场,王楚钦无缘16强

    爆冷!持副拍上场,王楚钦无缘16强   来源:都市快报  巴黎奥运会乒乓球男子单打1/16决赛于今天下午进行。其中王楚钦对战莫雷加德,让全国网友格外关注。  由于昨晚混双决赛后,王楚钦的主拍被踩断,今天这场比赛,王楚钦是持副拍上场。早前 ...[详细]
  • 本轮黎以冲突已致黎巴嫩3002人死亡

    本轮黎以冲突已致黎巴嫩3002人死亡 △黎巴嫩南部资料图)  黎巴嫩公共卫生部当地时间11月4日通报称,自2023年10月8日黎以冲突爆发以来,黎巴嫩境内有3002人死亡,13492人受伤。总台记者 次晓宁)  相关报道  以军称打死黎巴 ...[详细]
  • 【天气地理】高考常考的特殊天气!高考地理中的三种天气系统!

    【天气地理】高考常考的特殊天气!高考地理中的三种天气系统! 在高考地理中,台风、寒潮和梅雨都是重要的气象灾害相关知识点。台风是发生在热带海洋上的强烈气旋,具有巨大的破坏力。其形成需要广阔的高温洋面、合适的地转偏向力等条件。台风带来的影响既有狂风、暴雨和风暴潮等 ...[详细]
  • “为打压中国芯片,美国欺凌盟友”

    “为打压中国芯片,美国欺凌盟友”   外媒:美国在芯片问题上欺凌盟友——停止对华出售芯片制造技术,否则将毁掉你们的产业  欧洲政策分析中心网站7月29日文章,原题:没有胡萝卜,只有大棒——美国在中国芯片问题上欺凌盟友  美国向两个亲密 ...[详细]
  • 新华全媒+

    新华全媒+   8月1日,东海结束了3个月的伏季休渔,单船桁杆拖网桁杆拖虾)、笼壶类、刺网类、灯光围敷)网类等四类专项)特许捕捞作业渔船迎来了开渔季。浙江舟山2000多艘取得特许的渔船结束休渔奔赴渔场投入生产,梭 ...[详细]
  • 特朗普:如果当选将大规模驱逐移民

    特朗普:如果当选将大规模驱逐移民   来源:财联社  财联社11月5日电,特朗普周一在宾夕法尼亚州匹兹堡的一次竞选集会上表示,如果他在周二当选,他将大规模驱逐移民。 ...[详细]
  • 王楚钦回应爆冷出局:主拍坏了不是输球的理由

    王楚钦回应爆冷出局:主拍坏了不是输球的理由   来源:新黄河·济南时报  [#王楚钦回应爆冷出局# ]#王楚钦换球拍不是输球的理由#北京时间7月31日,巴黎奥运会乒乓球男子单打32强赛,中国选手@王楚钦___ 不敌瑞典选手莫雷加德,无缘16强。 ...[详细]