Google AI协助解码海豚与海豚交流

几十年来,科学家们一直被海豚的咔嗒声、哨声和突发脉冲所吸引,试图破解它们复杂沟通的密码。想象一下,如果我们不仅能偷听这些海洋对话,还能深入解读它们的模式,足以创造出类似海豚的回应。这个梦想正逐渐接近现实,在国家海豚日,Google 与佐治亚理工学院的研究人员以及野外海豚项目(WDP)的实地工作合作,兴奋地分享了 DolphinGemma 的激动人心更新。这一突破性的人工智能模型经过训练,能够理解海豚发声的细微差别,甚至生成新颖的声音序列,推动了人工智能的极限以及我们与海洋生物连接的潜力。
海豚社会研究的几十年
了解任何物种都不是一件轻松的事;它需要深入探索它们的世界。这就是 WDP 的作用所在。自1985年以来,他们一直在进行最长时间的水下海豚研究项目,聚焦于巴哈马一群野生大西洋斑点海豚(Stenella frontalis),跨代研究它们。“在它们的世界,按它们的条件”方法意味着他们在不干扰海豚的情况下收集了大量数据。这包括几十年的水下视频和音频,所有这些都与个体海豚的身份、生活史和行为精心关联。就像拥有一本详细的海豚生活日记。
一群大西洋斑点海豚,Stenella frontalis
WDP 的主要焦点是观察和分析海豚的自然沟通和社会互动。通过在水下工作,研究人员能够将声音直接与特定行为联系起来,这是表面观察无法做到的。他们花了多年时间将不同类型的声音与行为情境相关联。例如:
- 签名哨声,类似于独特的姓名,帮助母海豚和幼海豚团聚。
- 突发脉冲“尖叫声”通常伴随着海豚的争执。
- 咔嗒“嗡嗡声”常在求偶或追逐鲨鱼时听到。
了解涉及的个体海豚是准确解读的关键。这种长期观察的最终目标是解码这些自然声音序列的结构和潜在含义,寻找可能暗示某种语言形式的模式和规则。这种对自然沟通的深入分析是 WDP 研究的基础,并为人工智能分析提供了关键背景。
左图:一只母斑点海豚在觅食时观察她的幼崽。她会使用她独特的签名哨声召回幼崽。右图:显示哨声的声谱图。
介绍 DolphinGemma
分析海豚自然、复杂的沟通绝非易事,WDP 广泛的标记数据集为人工智能创新提供了宝贵机会。由此诞生了 Google 创造的 DolphinGemma,它利用了特定的音频技术。SoundStream 分词器有效地捕捉海豚的声音,然后由专为复杂序列设计的模型处理。这个约4亿参数的模型大小适中,适合 WDP 在实地使用的 Pixel 手机运行。
左图:DolphinGemma 早期测试中生成的哨声和突发脉冲。
DolphinGemma 灵感来源于 Google 的 Gemma 系列轻量级尖端开放模型,这些模型与 Gemini 模型共享相同的研究和技术。DolphinGemma 在 WDP 的野生大西洋斑点海豚声学数据库上训练,作为一个音频输入、音频输出的模型。它处理自然海豚声音序列以发现模式、结构,并最终预测序列中可能的下一个声音,类似于人类语言模型预测下一个单词的方式。
本季,WDP 正在实地推出 DolphinGemma,短期内将带来显著的好处。通过识别重复的声音模式、集群和可靠序列,该模型可以帮助研究人员发现海豚自然沟通中隐藏的结构和潜在含义——这项工作此前需要大量人力。未来,这些模式结合研究人员为代表海豚喜欢的物体创建的合成声音,可能为共享词汇和互动沟通铺平道路。
使用 Pixel 手机聆听和分析海豚声音
除了分析自然沟通外,WDP 还在探索另一条途径:在海洋中使用技术进行潜在的双向互动。这促成了与佐治亚理工学院合作开发的 CHAT(Cetacean Hearing Augmentation Telemetry)系统。CHAT 是一个水下计算机,旨在不是解码海豚复杂的自然语言,而是建立一个更简单的共享词汇。
其理念是将新颖的、由 CHAT 生成的合成哨声(区别于自然海豚声音)与海豚感兴趣的特定物体(如马尾藻、海草或研究人员使用的围巾)关联起来。通过向彼此展示系统,研究人员希望好奇的海豚会学会模仿这些哨声以请求这些物品。随着对海豚自然声音的理解加深,这些也可以融入系统。
为实现双向互动,CHAT 系统必须:
- 在海洋噪音中准确听到模仿的声音。
- 实时识别被模仿的哨声。
- 通过水下工作的骨传导耳机通知研究人员海豚“请求”的物体。
- 允许研究人员快速回应,提供正确的物体,强化这种联系。
Google Pixel 6 之前已能实时处理海豚声音的高保真分析。下一代将聚焦于 Google Pixel 9(计划于2025年夏季进行研究),通过集成扬声器/麦克风功能并利用手机的先进处理能力,同时运行深度学习模型和模板匹配算法。
左图:Denise Herzing 博士佩戴“Chat Senior, 2012”,右图:佐治亚理工学院博士生 Charles Ramey 佩戴“Chat Junior, 2025”
使用 Pixel 智能手机大大减少了对定制硬件的需求,提高了系统可维护性,降低了功耗,并缩小了设备的成本和尺寸——这些是在开放海洋中进行实地研究的关键优势。同时,DolphinGemma 的预测能力可以帮助 CHAT 在发声序列早期预测和识别潜在的模仿,加快研究人员对海豚的响应,使互动更顺畅、更具强化性。
最新 CHAT 系统硬件内的 Google Pixel 9。
与研究社区分享 DolphinGemma
认识到科学发现中协作的重要性,我们计划在今年夏天将 DolphinGemma 作为开放模型分享。尽管它是在大西洋斑点海豚的声音上训练的,但我们相信它对研究其他鲸类物种(如宽吻海豚或飞旋海豚)的学者可能也有用。不同物种的发声可能需要一些微调,但开放模型允许这种适应。
通过提供像 DolphinGemma 这样的工具,我们旨在为全球研究人员提供分析他们自己的声学数据集的手段,加速模式搜索,共同增强我们对这些智能海洋哺乳动物的理解。
理解海豚沟通的旅程漫长而曲折,但 WDP 的专注实地研究、佐治亚理工学院的工程实力和 Google 的技术力量相结合,正在开启激动人心的新可能性。我们不再只是聆听;我们开始理解声音中的模式,为未来人类与海豚沟通的差距可能进一步缩小的舞台奠定了基础。
您可以在野外海豚项目的网站上深入了解更多信息。
相关文章
华纳音乐收购AI归因初创公司Sureel AI
华纳音乐集团(WMG)于周三确认,其正在收购Sureel AI,一家专注于人工智能归因的初创公司。Sureel的专有技术为音乐曲目生成“AI DNA”,将其分解为各个组成部分,以追踪人工智能模型如何利用这些元素。通过此次收购,WMG旨在增强其监控其艺术家和词曲创作者的作品在人工智能生成内容中被使用或用于训练人工智能模型的能力。“将Sureel整合到WMG中,增强了我们的保护、控制和变现能力,确保创意社区保留对其知识产权、姓名、肖像、形象和声音的控制权,”WMG首席执行官Robert Kync
亚马逊推出“Alexa for Shopping”,同时将Rufus边缘化
亚马逊推出了“Alexa for Shopping”,将 Rufus 购物聊天机器人 Alexa+ 整合到应用程序、网站和 Echo Show 设备中。该助手回答产品查询、比较商品、跟踪价格,并支持购物提醒。它还处理计划中的购物操作和符合条件的自动购买。据该公司称,“Alexa for Shopping”将 Rufus 的产品专业知识与 Alexa+ 的个性化助手上下文相结合。亚马逊表示,Rufus 在 2025 年协助了超过 3 亿客户进行产品研究、比较和购买。GeekWire 报道称,
微软、Azure 和人工智能技术共同应对加利福尼亚州野火风险
微软投资于人工智能驱动的山火监测技术,其首席副总裁兼首席数据科学家胡安·拉维斯塔·费雷斯(Juan Lavista Ferres)探讨了减轻环境损害的策略。据美国国家航空航天局(NASA)称,气候变化影响着地球上的每个人,其表现为气温上升、降雨模式改变以及海平面上升。NASA指出,有确凿证据表明地球正以史无前例的速度变暖,而人类活动是其主要驱动因素。随着全球气温上升,野火构成的威胁日益加剧。 在美
相关专题推荐
评论 (10)
0/500
L'idée est folle ! Décoder le langage des dauphins grâce à l'IA... c'est comme si on découvrait finalement une langue extraterrestre sur notre propre planète. 😱 Je me demande si ça pourrait un jour vraiment déboucher sur une forme de dialogue, ou si ça restera un simple outil pour comprendre leurs alertes ou leurs humeurs. En tout cas, c'est un beau projet, à défaut de parler avec une intelligence extraterrestre lointaine, commençons par nos voisins des océans ! 🌊
Das ist ja echt faszinierend! 🐬 Aber mal ehrlich, wann kommt die erste Dating-App mit Dolmetscher-Funktion für unsere Meeressäuger-Freunde? 😂 Allerdings macht mir die mögliche kommerzielle Nutzung auch etwas Angst.
Finalmente estamos mais perto de conversar com golfinhos! 🐬 Mas será que eles vão gostar das nossas piadas? Imagina um golfinho rindo dos nossos memes aquáticos... Jason Warner tem razão, melhor focar em apps legais assim do que reinventar modelos gigantes.
Wow, decoding dolphin language with AI? That's wild! Imagine chatting with dolphins someday, but I wonder if they'll have better gossip than us humans. 🐬
This is wild! Google’s AI decoding dolphin chatter? I wonder if we’ll ever have a full-on convo with dolphins, like chatting with an alien species. 🐬 Super cool but kinda creepy too!

几十年来,科学家们一直被海豚的咔嗒声、哨声和突发脉冲所吸引,试图破解它们复杂沟通的密码。想象一下,如果我们不仅能偷听这些海洋对话,还能深入解读它们的模式,足以创造出类似海豚的回应。这个梦想正逐渐接近现实,在国家海豚日,Google 与佐治亚理工学院的研究人员以及野外海豚项目(WDP)的实地工作合作,兴奋地分享了 DolphinGemma 的激动人心更新。这一突破性的人工智能模型经过训练,能够理解海豚发声的细微差别,甚至生成新颖的声音序列,推动了人工智能的极限以及我们与海洋生物连接的潜力。
海豚社会研究的几十年
了解任何物种都不是一件轻松的事;它需要深入探索它们的世界。这就是 WDP 的作用所在。自1985年以来,他们一直在进行最长时间的水下海豚研究项目,聚焦于巴哈马一群野生大西洋斑点海豚(Stenella frontalis),跨代研究它们。“在它们的世界,按它们的条件”方法意味着他们在不干扰海豚的情况下收集了大量数据。这包括几十年的水下视频和音频,所有这些都与个体海豚的身份、生活史和行为精心关联。就像拥有一本详细的海豚生活日记。
- 签名哨声,类似于独特的姓名,帮助母海豚和幼海豚团聚。
- 突发脉冲“尖叫声”通常伴随着海豚的争执。
- 咔嗒“嗡嗡声”常在求偶或追逐鲨鱼时听到。
了解涉及的个体海豚是准确解读的关键。这种长期观察的最终目标是解码这些自然声音序列的结构和潜在含义,寻找可能暗示某种语言形式的模式和规则。这种对自然沟通的深入分析是 WDP 研究的基础,并为人工智能分析提供了关键背景。
介绍 DolphinGemma
分析海豚自然、复杂的沟通绝非易事,WDP 广泛的标记数据集为人工智能创新提供了宝贵机会。由此诞生了 Google 创造的 DolphinGemma,它利用了特定的音频技术。SoundStream 分词器有效地捕捉海豚的声音,然后由专为复杂序列设计的模型处理。这个约4亿参数的模型大小适中,适合 WDP 在实地使用的 Pixel 手机运行。
本季,WDP 正在实地推出 DolphinGemma,短期内将带来显著的好处。通过识别重复的声音模式、集群和可靠序列,该模型可以帮助研究人员发现海豚自然沟通中隐藏的结构和潜在含义——这项工作此前需要大量人力。未来,这些模式结合研究人员为代表海豚喜欢的物体创建的合成声音,可能为共享词汇和互动沟通铺平道路。
使用 Pixel 手机聆听和分析海豚声音
除了分析自然沟通外,WDP 还在探索另一条途径:在海洋中使用技术进行潜在的双向互动。这促成了与佐治亚理工学院合作开发的 CHAT(Cetacean Hearing Augmentation Telemetry)系统。CHAT 是一个水下计算机,旨在不是解码海豚复杂的自然语言,而是建立一个更简单的共享词汇。
其理念是将新颖的、由 CHAT 生成的合成哨声(区别于自然海豚声音)与海豚感兴趣的特定物体(如马尾藻、海草或研究人员使用的围巾)关联起来。通过向彼此展示系统,研究人员希望好奇的海豚会学会模仿这些哨声以请求这些物品。随着对海豚自然声音的理解加深,这些也可以融入系统。
- 在海洋噪音中准确听到模仿的声音。
- 实时识别被模仿的哨声。
- 通过水下工作的骨传导耳机通知研究人员海豚“请求”的物体。
- 允许研究人员快速回应,提供正确的物体,强化这种联系。
Google Pixel 6 之前已能实时处理海豚声音的高保真分析。下一代将聚焦于 Google Pixel 9(计划于2025年夏季进行研究),通过集成扬声器/麦克风功能并利用手机的先进处理能力,同时运行深度学习模型和模板匹配算法。
与研究社区分享 DolphinGemma
认识到科学发现中协作的重要性,我们计划在今年夏天将 DolphinGemma 作为开放模型分享。尽管它是在大西洋斑点海豚的声音上训练的,但我们相信它对研究其他鲸类物种(如宽吻海豚或飞旋海豚)的学者可能也有用。不同物种的发声可能需要一些微调,但开放模型允许这种适应。
通过提供像 DolphinGemma 这样的工具,我们旨在为全球研究人员提供分析他们自己的声学数据集的手段,加速模式搜索,共同增强我们对这些智能海洋哺乳动物的理解。
理解海豚沟通的旅程漫长而曲折,但 WDP 的专注实地研究、佐治亚理工学院的工程实力和 Google 的技术力量相结合,正在开启激动人心的新可能性。我们不再只是聆听;我们开始理解声音中的模式,为未来人类与海豚沟通的差距可能进一步缩小的舞台奠定了基础。
您可以在野外海豚项目的网站上深入了解更多信息。
华纳音乐收购AI归因初创公司Sureel AI
华纳音乐集团(WMG)于周三确认,其正在收购Sureel AI,一家专注于人工智能归因的初创公司。Sureel的专有技术为音乐曲目生成“AI DNA”,将其分解为各个组成部分,以追踪人工智能模型如何利用这些元素。通过此次收购,WMG旨在增强其监控其艺术家和词曲创作者的作品在人工智能生成内容中被使用或用于训练人工智能模型的能力。“将Sureel整合到WMG中,增强了我们的保护、控制和变现能力,确保创意社区保留对其知识产权、姓名、肖像、形象和声音的控制权,”WMG首席执行官Robert Kync
微软、Azure 和人工智能技术共同应对加利福尼亚州野火风险
微软投资于人工智能驱动的山火监测技术,其首席副总裁兼首席数据科学家胡安·拉维斯塔·费雷斯(Juan Lavista Ferres)探讨了减轻环境损害的策略。据美国国家航空航天局(NASA)称,气候变化影响着地球上的每个人,其表现为气温上升、降雨模式改变以及海平面上升。NASA指出,有确凿证据表明地球正以史无前例的速度变暖,而人类活动是其主要驱动因素。随着全球气温上升,野火构成的威胁日益加剧。 在美
L'idée est folle ! Décoder le langage des dauphins grâce à l'IA... c'est comme si on découvrait finalement une langue extraterrestre sur notre propre planète. 😱 Je me demande si ça pourrait un jour vraiment déboucher sur une forme de dialogue, ou si ça restera un simple outil pour comprendre leurs alertes ou leurs humeurs. En tout cas, c'est un beau projet, à défaut de parler avec une intelligence extraterrestre lointaine, commençons par nos voisins des océans ! 🌊
Das ist ja echt faszinierend! 🐬 Aber mal ehrlich, wann kommt die erste Dating-App mit Dolmetscher-Funktion für unsere Meeressäuger-Freunde? 😂 Allerdings macht mir die mögliche kommerzielle Nutzung auch etwas Angst.
Finalmente estamos mais perto de conversar com golfinhos! 🐬 Mas será que eles vão gostar das nossas piadas? Imagina um golfinho rindo dos nossos memes aquáticos... Jason Warner tem razão, melhor focar em apps legais assim do que reinventar modelos gigantes.
Wow, decoding dolphin language with AI? That's wild! Imagine chatting with dolphins someday, but I wonder if they'll have better gossip than us humans. 🐬
This is wild! Google’s AI decoding dolphin chatter? I wonder if we’ll ever have a full-on convo with dolphins, like chatting with an alien species. 🐬 Super cool but kinda creepy too!





首页






