Hume AI - AI语音对话机器人,专注于理解情绪感知和表情测量

发布于 2024-12-10 · Hume AI是专注于开发能够理解人类情感和表情的技术的AI产品,提供实时、可定制的语音智能API。旗舰产品Hume EVI是世界上首款共情AI语音接口。EVI结合大语言模型的语言理解和表情测量技术的情感感知能力,能理解和回应用户情绪,提供真实对话体验。

Hume AI是什么

Hume AI 做的事是让机器听懂并回应人的情绪。产品核心是实时、可定制的语音智能 API,开发者可以把它接进自己的应用。旗舰产品 Hume EVI 是世界上首款共情 AI 语音接口,把大语言模型的语言理解和表情测量技术的情感感知能力结合起来,能识别用户情绪并做出对应回应,聊起来更接近真人。健康保健、AR/VR、客户服务这类需要感知用户状态的场景用得比较多。

Hume AI

Hume AI的主要功能

  • 情绪识别与反应:分析语音和面部表情来识别用户的多种情绪状态,再按当下情绪给出对应的反应。
  • 情绪模拟:能模拟不同的情绪状态,互动时更生动。
  • 自然对话:对话延迟较短,会说语气词,听起来像真人在思考和倾听。
  • 情绪可视化:对话过程中实时显示情绪曲线,情绪起伏直接看得见。
  • 设计合成声音和个性:Hume AI 提供工具,可以调整 EVI 2 的基础声音,女性化、鼻音、音高这些维度都用连续尺度来控制。

Hume AI的情绪表达

  • 言语韵律:Hume AI 能发现超过 25 种曲调、节奏和音色模式,日常言语里的复杂含义和混合情绪就从这里读出来。能识别的情感包括娱乐、愤怒、尴尬、无聊、平静、困惑、蔑视、欲望、决心、苦恼、恐惧、内疚、恐怖、痛苦、骄傲、悲伤、惊讶和疲倦等。
  • 声音表达:可区分 28 种被认为传达不同含义的声音表达方式,几种混在一起的情况也算在内。包括崇拜、娱乐、愤怒、敬畏、困惑、轻蔑、满足、欲望、失望、厌恶、苦恼、狂喜、尴尬、兴奋、恐惧、恐怖、兴趣、喜悦、痛苦、实现、宽慰、悲伤、惊讶、同情、疲倦等。
  • 语音通话类型:通过推断 67 个描述符(如“笑”、“叹气”、“尖叫”、“哦”、“啊”、“嗯”等)的概率来探索声音表达。
  • 表情:可区分 37 种被认为传达不同含义的面部动作,以及它们混合在一起的多种方式。包括钦佩、崇拜、审美、愤怒、焦虑、敬畏、平静、蔑视、满足、渴望、欲望、决心、失望、苦恼、怀疑、狂喜、尴尬、共情痛苦、入迷、嫉妒、兴奋、恐惧等。
  • 面部表情动作捕捉:改进版的自动化面部动作编码系统 (FACS),测量 26 个面部动作单位 (AU) 和 29 个其他特征,偏差比传统 FACS 更小。
  • 动态反应:测量一段时间内面部表情的动态模式,和 20 多种不同的报告情绪相关。包括钦佩、崇拜、审美、娱乐、焦虑、敬畏、无聊、平静、专注、沉思、困惑、满足、渴望、厌恶、苦恼、共情痛苦、嫉妒、兴奋、恐惧、内疚、恐怖、兴趣、喜悦、爱等。

Hume AI的官网地址

Hume AI的应用场景

  • 客户服务和呼叫中心:客服能先听出客户的情绪再回应,服务更有针对性。
  • 健康和保健:心理健康评估和干预里,用它辅助识别患者的情绪状态,再给相应的情感支持。
  • 教育和培训:可以当虚拟助教或老师,根据学生的情绪反应调整讲法,学习节奏更贴合个人。
  • 娱乐和游戏:放进视频游戏和虚拟现实(VR)里,交互反应更接近真人。
  • 智能家居和物联网(IoT):接进智能家居设备,能理解并回应用户情绪,家居管理更贴合个人状态。
0

相关文章

0 条评论

后参与评论

暂无评论,来抢沙发。