今天你想看什么

华人小哥打造鸡鸣狗叫GPT,识狗情绪准达8成

  机器之能报道

  编辑:杨文

  铲屎官终于能理解汪星人的小心思了。

  「狗语翻译器」已经席卷娱乐圈。

  在节目中,贵气男孩尤长靖花了八百块钱,买了个「狗语翻译器」。

  视频链接:https://mp.weixin.qq.com/s/vMBq-S-NPwNXhh4XlVSJiA

  汪苏泷下单时问他,「有两百的、四百的和八百的,要买哪个?」

  尤长靖斩钉截铁地说,「买八百的」。

  因为一分钱一分货,越贵的肯定越精准。

  结果买回来,它就各种胡言乱语。

  郭麒麟和陆虎也同样玩起了「狗语翻译器」。

  视频链接:https://mp.weixin.qq.com/s/vMBq-S-NPwNXhh4XlVSJiA

  购物平台上,不少买家吐槽,这类长得像个蝴蝶结的狗语翻译器,简直就是智商税。

  狗叫的时候没反应,狗睡觉了它开始说话了。

  现在,AI 闯进了这个小众赛道,带来了不一样的效果。

  一位华人小哥搞出来一款狗语 GPT,专门识别汪星人的小情绪,其准确率高达 80%。

  视频链接:https://mp.weixin.qq.com/s/vMBq-S-NPwNXhh4XlVSJiA

  天啊噜,人类都还搞不懂自己,却听懂了「狗叫」。

  -1-

  「汪星人」能听懂人话了

华人小哥打造鸡鸣狗叫GPT,识狗情绪准达8成  最近,人类和「汪星人」丝滑对话的视频,在社交媒体上一炮走红。

  视频链接:https://mp.weixin.qq.com/s/vMBq-S-NPwNXhh4XlVSJiA

  视频中,一位男士对着手机上的一款 APP 说:

  Hi Ellie,你能帮我拿下遥控器吗?

  这款 APP 随即就把人类语言翻译成几句狗叫声。

  金毛犬听后,立马摇着尾巴,跑到茶几上叼来了遥控器。

  还有类似的案例。

  视频链接:https://mp.weixin.qq.com/s/vMBq-S-NPwNXhh4XlVSJiA

  女主人也是对着手机的 APP 说了一段话:

  你可以亲我一下吗?

  随着手机发出的几句短促的汪汪声,「毛孩子」听懂了,飞身来了一个 Kiss,主人一脸的不可思议。

  这款手机 APP,名叫 Traini,是一款「宠物共情 APP」,俗称「狗语翻译器」。

  它通过 AI 聊天机器人 PetGPT,实现人类与狗狗之间的跨物种对话和交流。

  其核心技术基于一个先进的宠物行为多模态翻译模型。

  这个模型采用了类似于 GPT-4o 的 Transformer 架构,并接受了大量专家级宠物行为学文本、视觉和音频数据的训练。

  为了确保翻译的准确性,Traini 团队尝试了多种训练方法,包括使用纯狗语音数据训练,对人类语音预训练模型进行微调,以及使用来自不同国家地区、不同品种狗的语音数据混合训练等。

  除了翻译狗叫声,它还能理解小狗的面部表情和身体行为,从而推荐它们的心理状态和情感需求。

  其实,小狗和人类一样,也是通过表情、声音和行为,来表达情绪。

  比如,当它们眼睛半闭含着泪珠,这就表示痛苦;耳朵直立指向前方,就表示想玩;鼻孔张大肌肉紧张,表示戒备。

  为此,该团队收集了 10 万只狗的照片、声音和视频,喂给模型,然后不断进行训练。

  如今,Traini 可以解读 10 种不同的宠物情绪,其准确率更是高达 80%。

  用户可以直接在 PetGPT 中上传照片并提出问题,以了解宠物的心理状态。

  截至目前,这款应用已经吸引了超过 20 万的用户。

  -2-

  背后团队是何方神圣?

  Traini 创始人兼 CEO 名叫孙邻家 (Arvin Sun) ,是一位华人连续创业者,曾在国内创业 7 年。

  他最早的创业经历还得追溯到大学时。

  那时,他和室友一起向刚入学的新生卖被子,毕业后就去了一家上市公司做供应链管理,差不多做了两年时间。

  2015 年,孙邻家又和同学一起创业,做起了零食专卖店「邻家铺子」,主打三公里内 30 分钟送货上门。

  后来又为美容院提供在线预约和门店端的 SaaS 服务,曾在 3 个月内融资数百万元。

  再之后,他做了一个给电商提供配套物流的平台,融到 3000 多万,团队也扩充到 100 多人,业务覆盖了 50 多个城市。

  2018 年,孙邻家去了美国,加入了最大的中餐外卖平台 GESOO 做 CEO,并实现了公司扭亏为盈。

  后来又去了另一家竞品公司 Chowbus 负责西海岸业务,并融资超过 1 亿美金。

  2022 年,孙邻家创办了 Traini,负责公司的客户增长和市场拓展。

  Traini 联合创始人名叫 Jason Hong,他是一名年轻的中国小伙子,年仅 24 岁。

  他曾是湖南省奥数青训队成员,后在美国东北大学大学攻读计算机研究生,并在 Scale AI、OpenAI 和百度工作过,积累了先进模型的开发实践经验。

  如今,他负责核心 PetGPT 模型架构和训练。

  此外,Traini 还有两名全职员工,分别负责界面设计和全栈工程搭建。

  公司还邀请了前 Chewy 数据科学负责人 Yiyi Yang 加入,担任宠物健康专业顾问。

  今年 5 月份,公司还完成了千万元天使轮融资。

  -3-

  日本团队搞了个鸡叫 GPT

  除了狗语翻译器,日本还搞了个鸡叫 GPT。

  东京大学教授 Adrian David Cheok 带领他的团队,研究了一种 AI 和机器学习方法,可以「听懂」鸡叫,并理解其心情。
华人小哥打造鸡鸣狗叫GPT,识狗情绪准达8成
  他们将这种高度数学化和创新的方法称之为「深度情感分析学习(DEAL)」,可以通过听觉数据对情绪状态实现精细分析。

  首先,收集鸡叫声。

  研究团队将音频记录分割成小片段,以专注于每只鸡的声音,每个片段代表一个不同的声音事件,如咯咯声或嘎嘎声。

  为了消除背景噪音,提高鸡叫声信号质量,团队还采用了降噪技术。

  再把音频信号进行标准化,确保它们具有一致的幅度范围,有助于减少记录条件中的任何变化,并确保模型可以很好地泛化不同的记录。

  其次,把鸡叫声输入 DEAL 模型,该模型通过多个层次进行数据处理。

  这个系统利用卷积层学习空间特征层次结构,池化层减小表征的空间大小以控制过拟合并减少计算,全连接层学习高级特征的非线性组合。

  最后,softmax 函数用于产生最终输出情绪状态的概率分布。

  概率最高的情绪状态,将被选为预测的情绪状态。

  为了测试新系统,该研究团队以 80 只鸡为样本,仔细记录和分析了它们在不同条件下的发声。

  同时为了确保准确性,它们专门聘请了 8 名动物心理学家和兽医,对鸡的情绪状态提供了专家的见解。

  最终,他们发现这个系统可以准确地翻译鸡的各种鸣叫和心情,包括饥饿、恐惧、愤怒、满足、兴奋和痛苦等,准确率接近 80%。

  然而,研究人员也指出,由于世界鸡的种类繁多,可能存在无法翻译的情况。

  参考链接:

  https://www.researchsquare.com/article/rs-3034567/v1

  https://mp.weixin.qq.com/s/kgCmbIPFKVLg4dptvChkvQ

  https://mp.weixin.qq.com/s/SOGWBpNx3O5QMSQAbhzIaw

  https://mp.weixin.qq.com/s/_tKqvS_jrlgqWJV69gLbig