一水 发自 凹非寺量子位 | 公众号 QbitAI白虎 意思
神奇!东谈主类和海豚果真能完了跨物种交流了?!
当地时候4月14日(亦然全国海豚日),谷歌CEO皮猜兴奋官宣:
恢弘推出DolphinGemma,基于多年积累的海豚声息数据执行而成,有助于完了跨物种交流。划重心,这个海豚模子参数仅400M,小到能径直在谷歌Pixel 9手机上开动。
而且皮猜还说了,预测本年夏天会将其开源以促进科学合营。
这一音书也赶快引来大齐网友围不雅,磋议区一统共这个词“哇声一派”:
更有风趣的是,谷歌和OpenAI这对老寇仇这一次又双叒对上了,OpenAI哪里发布了GPT 4.1。
有网友径直辣评:GPT 4.1很好,但我对DolphinGemma更感兴味。(你是懂拉踩的doge)
谷歌大模子破解海豚叫声
谷歌此次发布的AI基础模子DolphinGemma,经过执行不错学习海豚的发声结构,并生成访佛的声息序列。
这和大语言模子中的预测下一个token访佛,通过识别输入的海豚音频,来预测后续可能出现的声息,并最终解锁这些声息掩盖的潜在含义。
字据先容,这一模子使用了谷歌私有的音频时代。
其中,SoundStream分词器能快速把海豚声息造成策画机能调和的信号,随后由符合贬责复杂序列的模子架构进行贬责。
天然,除了执行时代,最紧迫的步伐照旧在于赢得数据。
谷歌此次找了WDP( Wild Dolphin Project)合营白虎 意思,这家机构商酌海豚社会数十年,领有极为丰富的数据集。
具体而言,自1985年以来,WDP商酌了巴哈马群岛中一个跨世代的野生大欧好意思雀斑海豚(Stenella frontalis)群落。
通过这一“全国上合手续时候最长的水下海豚商酌技俩”,最终蕴蓄了数十年的水下视频和音频,况兼每个海豚的身份、生涯史和不雅察到的举止领有详尽匹配。
比如底下这些八成将海豚声息和举止关系起来的例子:
标记性的口哨声,一般出当今子母相遇的场景
打斗常常时会听到脉冲“尖叫声”
求偶或追赶鲨鱼常常用“嗡嗡”声
下图展示了第一种情形。
左图:一只雀斑海豚姆妈在幼崽觅食时不雅察着它,等幼崽觅食完毕后,它会用我方私有的口哨声招呼它总结。
右图:声谱图夸耀的口哨声。
波多野结衣 女同因此最终,DolphinGemma是基于WDP的野生大欧好意思雀斑海豚声学数据库进行鄙俚执行。
另一方面,除了商酌海豚的交流神志,WDP还进一步探索了“东谈主机交互”神志。
该机构与佐治亚理工学院合营,开发了CHAT(Cetacean Hearing Augmentation Telemetry) 这款水下应用,其遐想主张并非径直解读海豚复杂的天然语言,而是开发一套更简约的分享词汇。
具体来说,CHAT会将生成的合成哨声与海豚可爱的特定物体关系起来,比如海藻、海草或商酌东谈主员使用的领巾。
然后通过东谈主类指令,让天生赞佩的海豚学会师法这些哨声来肯求这些物品。
最终,跟着对海豚更多天然声息的调和,这些声息也不错被加入到系统中。
△CHAT暗示图
抽象而言,CHAT斥地通过水下扬声器和麦克风完了声息的发送和袭取,通过尝试师法海豚发出的哨声来开发一种基本的相似桥梁。
谷歌表示,Pixel 6(谷歌2021年10月发布)照旧八成及时贬责高保真海豚声息分析,而行将发布的Pixel 9(方案于2025年夏令参加使用)将在此基础上进行升级。
Pixel 9将集成扬声器和麦克风功能,并应用手机强大的贬责才智同期开动深度学习模子和模板匹配算法。这将使商酌东谈主员八成更高效地分析海豚的声息,并与海豚进行更复杂的互动。One More Thing
也有东谈主赞佩,为什么谷歌选了海豚而非更常见的猫狗来商酌?
固然官方此次未明确说起背后原因,但查阅鄙俚商酌贵寓后不错得出一个论断:
这是因为海豚的“语言”和东谈主类语言高度接近。
一项发表在《皇家社会生物学通信》的商酌标明,海豚互相间交流的神志近乎于东谈主类。
当一些海豚发出像吹口哨一样的声息时,这些声息是由特定组织革新发出的,其运作旨趣访佛于东谈主类和很多陆生生物的声带振动。
论文一作彼得·麦德森曾表示:
内容上,它们是通过鼻腔中结缔组织的共振频率来发声的,而且它们能节略调度肌肉垂危度和通过的气流。这和东谈主类用声带谈话时作念的一模一样。和海豚访佛,事实上谷歌2024年9月还推出了一款鲸鱼声息识别模子,它八成识别出八种鲸鱼的私有叫声,并精细别离其中两种鲸鱼的不同发声类型。
而鲸鱼也和海豚一样,其语言和东谈主类语言也具有相似性。
本年纪首发表在《科学》杂志上的一项商酌感触地发现,通过师法儿童学习语言的经过,鲸鱼的歌声与东谈主类使用的语言存在统计相似性。
这一发现不仅揭开了鲸歌的部分隐私,还为调和跨物种交流乃至AI语言模子提供了全新视角。
不错看到,谷歌最初接头的照旧这些与东谈主类语言更接近的物种。
不外别暴躁,从DeepMind联创兼CEO哈萨比斯露馅的思法来看,没准下一个即是狗了。(doge)
参考连络:[1]https://blog.google/technology/ai/dolphingemma/[2]https://x.com/demishassabis/status/1911875286070923624[3]https://www.science.org/doi/10.1126/science.adq7055
一键三连「点赞」「转发」「预防心」
接待在磋议区留住你的思法!白虎 意思