OpenAI推出新一代AI模型GPT-4o 音频视频理解能力尚无敌手

【TechWeb】5月14日消息,据外媒报道,在今日凌晨1点开始的春季更新中,OpenAI宣布了他们新一代的旗舰模型GPT-4o,可以利用语音、视频和文本信息进行实时推理。

从OpenAI在官网上公布的信息来看,GPT-4o中的“o”源自“omni”,也就是全面、全能的意思,朝着更自然的人机交互又迈出了关键一步。

而GPT-4o也的确如名字中“omni”的全能一样,是一款能力更全面的大语言模型,打通了文本、音频和图像,接受任何文本、音频和视频的组合输入,并生成文本、音频和视频的组合输出。

OpenAI在官网上披露,GPT-4o在英文文本和代码中的表现与GPT-4 Turbo相当,但在非英文文本上的能力大幅提升,在视频和音频的理解上,GPT-4o要明显强于当前的其他模型。

在官网上,OpenAI提到,在GPT-4o之前,通过语音模式同ChatGPT对话时,有较长时间的延迟,GPT-3.5平均为2.8秒,GPT-4平均为5.4秒。而由三个独立模式组成的语音模式,也丢失了大量信息,无法直接识别音调、多个说话者或背景噪音,也无法输出笑声、歌唱或表达情感。

但在GPT-4o中,OpenAI训练一个跨文本、音频和视频的端到端新模型,所有的输入和输出都是由同一神经网络处理,GPT-4o也是他们首个整合了个文本、音频和视频模式的模型,

能力更全面的GPT-4o,响应速度也更快,最快232毫秒响应音频输入,平均响应时间为320毫秒,与人类在对话中的响应速度相当。

除了更强、更全面的能力,OpenAI也在推动GPT-4o更广泛的应用。GPT-4o的文本和图片功能自推出之日起就向ChatGPT推送,ChatGPT用户可免费使用,ChatGPT Plus用户的数据量上限将是免费用户的5倍,新版本的音频模式将在未来几周向ChatGPT Plus用户推送。

OpenAI周二凌晨1点开始的春季更新,是由CTO Mira Murati主持进行,登台的还有两位研发人员,公司CEO萨姆•奥特曼并未登场。

不过,未现身直播的萨姆•奥特曼,在社交媒体上对GPT-4o也进行了推广。他在社交媒体上就表示,他们最新的模型GPT-4o,是他们到目前为止最好的模型,它很聪明、速度很快,是天然的多模态。

萨姆•奥特曼在社交媒体上也提到,GPT-4o对所有的ChatGPT用户免费,而此前GPT-4级别的模型仅对按月付费的用户免费。

而值得注意的是,OpenAI在周二凌晨推出能力更全面的GPT-4o,无疑会给谷歌带来更大的压力,谷歌2024年度的I/O开发者大会,将在当地时间周二开始,外界预计他们会推出大量人工智能相关的产品。(海蓝)

原创文章,作者:,如若转载,请注明出处:https://knewsmart.com/archives/297807

(0)
上一篇 2024年5月14日 下午3:10
下一篇 2024年5月14日

相关推荐

  • "全勤"拜耳七赴进博,以"向新力"点亮健康美好未来

    上海2024年7月27日 /美通社/ -- 第七届中国国际进口博览会(以下简称"进博会")迎来开幕倒计时100天。全球领先的生命科学企业拜耳将连续第七年携旗下处方药(及影像诊断)、健康消费品、作物科学三大事业部奔赴一年…

    发现 2小时前
    7.2K
  • 德国老牌电视Loewet复兴 三星操作系统撑起半边天?

    来源 / 蓝科技 全球电视领域,三星的主导地位愈发遭受挑战。 随着中国企业在LCD市场“称王”,并在OLED等尖端显示领域不断提升市场份额、缩小差距,关于三星电视的“危机论”一直是近几年比较热门的话题。 根据全球市场…

    专栏 4小时前
    10.3K
  • 松下在迪拜设立空气质量体验中心给中国企业带来什么启示?

    作者:蓝科技 和鼎盛时期相比,尽管眼下的松下家电在销量方面整体趋弱,但松下家电的品牌影响力和用户口碑余威犹在。 对中国家电企业而言,在技术、设计方面完全有媲美松下的资本,但在品牌影响力以及用户体验创新…

    专栏 4小时前
    12.3K
  • HR SaaS不香了?北森控股怎么了?

    作者:刘旷 近年来国内SaaS的发展如火如荼,各类应用层出不穷。随着各路资本的陆续入局,SaaS行业也在一时之间站上了风口。作为重要的应用领域,HR SaaS更是受到了各类资本的青睐,在国内得到了迅速发展。 作为国内…

    专栏 4小时前
    12.5K
  • 俞敏洪还是没能留住董宇辉

    来源 / 市值榜 文:相青 晓鹏,编辑:徐伟,出品:增长工场 共患难易,同富贵难。董宇辉与东方甄选终于走到了“分手”这一步。 7月25日,东方甄选发布公告,官宣董宇辉离职,以及董宇辉以7658.55万元全资收购“与辉同…

    专栏 4小时前
    13.0K
  • 董宇辉离职真相:俞敏洪把公司「送」给了他

    来源 / 节点财经 文 / 九才  董宇辉和东方甄选还是分手了。 7月25日,东方甄选在港交所发布公告称,董宇辉已从东方甄选离职,并于当日生效。此外,东方甄选还表示,7月25日,董宇辉(买方)、北京新东方迅程网络科…

    专栏 4小时前
    11.2K
  • 16年惠及赣州数万果农央视高规格报道农夫山泉“农事迹”

    来源 / 翟菜花 农业发展到底有多重要? 从农夫山泉和赣州果农“不可思议”地一起被央视给报道就能看得出来。 7月22日,央视二套皇牌栏目经济半小时播出的《联农带农》主题节目,通过报导农夫山泉在赣州、新疆等地的农…

    专栏 4小时前
    13.9K
  • 雷军凡尔赛:被董明珠批评后,米家空调变得更火了

    作者:龚进辉 众所周知,雷军与董明珠既是多年好友,也是竞争对手。在我的印象中,他们和谐相处的画面相对较少,互怼、明争暗斗的戏码倒是不少。这不,在空调一役,两位大佬隔空交火好几个回合。 第一回合:6月28日…

    专栏 4小时前
    11.9K
  • 科沃斯两个多月市值蒸发超百亿,钱东奇父子身家大缩水

    雷达财经鸿途出品 文|肖洒 编|深海 7月23日,有着A股“扫地机器人第一股”之称的科沃斯,报收于39.21元,股价跌幅为4.44%。 雷达财经注意到,自5月13日以来,公司整体股价处于下降通道。至7月23日收盘,科沃斯在51个…

    专栏 4小时前
    11.9K
  • 17年种下一颗“产业信心”,央视报道农夫山泉硬核助农

    来源 | 伯虎财经(bohuFN) 作者 | 陈平安 江西赣州,这个在中国互联网上略显低调的城市,却有一个连续9年蝉联全国区域品牌(地理标志产品)水果类第一的果品——赣南脐橙。2023年,赣南脐橙的品牌价值高达691.27亿元。…

    专栏 4小时前
    13.2K

发表回复

登录后才能评论