通义听悟是阿里云于2023年6月推出的基于大模型的工作学习AI助手,系通义家族首个面向消费级用户的产品。该产品依托通义千问大模型与语音AI技术,可实现音视频内容转写、全文摘要、章节速览及发言总结,支持会议、讲座等场景的信息提炼与知识资产沉淀,并与阿里云盘深度打通,支持云盘内音视频分析及字幕匹配。
2023年6月1日,通义听悟在阿里云峰会·粤港澳大湾区启动公测;同年11月于云栖大会正式上线。2024年3月新增音视频问答助手“小悟”,支持跨记录、多语言自由提问及最长6小时音视频解析。产品后续计划接入钉钉等平台,并集成至阿里巴巴内部应用(如钉钉闪记)中,持续拓展职场、教育等场景的垂直功能。
通义听悟是通义家族第一个面向大众消费者端的应用产品。
在多媒体时代,人们每天记录、分享和观看大量的音频视频内容,通义听悟通过前沿的语音AI技术,能够准确地将音频视频内容转写为易读的文字。不仅如此,结合通义千问大语言模型的强大理解能力,通过全文摘要、章节速览、发言总结等功能,使用户能够从不同角度“一目十行”地更高效“阅读”音视频内容。随着大模型能力的飞速进步,通义听悟能为用户提供更多先进的能力,帮助用户梳理和挖掘出音视频内容中的信息价值,并将所有的记录和收集都沉淀为知识资产,随时供用户回顾和利用。借助通义听悟,用户可以如实地记录一堂精彩的讲座、一次深度访谈或一场重要会议,它将成为用户身边的智能伙伴,“听”遍所有内容,“悟”得其中深意。
2023年6月1日,2023阿里云峰会·粤港澳大湾区于广州举行,阿里云智能首席技术官周靖人宣布推出通义家族最新产品——工作学习AI助手“通义听悟”,于6月1日开始正式公测。
2023年11月,阿里云在2023云栖大会正式上线通义听悟-工作学习AI助手。
2024年3月19日,阿里大模型产品“通义听悟”升级,音视频问答助手“小悟”上线,在业界首次实现单记录、跨记录、多语言自由问,支持对单个最长6小时、一次性上百条音视频的内容理解问答。
通义听悟当前已经与阿里云盘打通,存储在阿里云盘中的音频视频内容可以方便地导入通义听悟进行AI的分析和理解,在云盘内在线播放视频时也可自动匹配字幕。绑定阿里云盘账号的听悟用户可以共享阿里云盘超大存储空间,进行个人音视频的管理。
同时通义听悟的小程序版后续将在钉钉、阿里云盘等阿里旗下产品中推出,并与这些产品内部的场景功能及音视频内容融汇贯通。同时,通义听悟的AI能力也将进一步服务于阿里巴巴内部各类应用,如广受用户欢迎的“钉钉闪记”背后便集成了有关能力。
「通义听悟」简称听悟,是聚焦音视频内容的工作学习AI助手,依托大模型,为每一个人提供全新的音视频体验。
通义听悟可以在会议、学习、访谈、培训等场景下:
实时记录交流内容,同步翻译
批量转写音视频文件,区分发言人
智能提炼全文概要、章节速览、发言总结
自动提取关键词、问题、待办事项
编辑整理笔记,导出记录
前往通义听悟功能学堂,一分钟玩转通义听悟。
实时记录:开启实时记录,完整沉淀沟通内容,精准快捷生成记录,音字对应播放;
音视频转写:会议、访谈、学习等音视频文件快速上传,可同时上传多个文件,批量转写生成记录;
云盘导入:绑定阿里云盘账号,快捷转写阿里云盘音视频文件,记录文件一键转存至云盘;
翻译:支持一键开启中英互译,打破语言壁垒,轻松实现无障碍沟通;
发言人区分:支持自动区分发言人,也可以对发言人进行编辑、筛选,回顾整理更清晰;
待办事项:整理待办事项,后续安排了如指掌;
问题回顾:提取问题,快速回顾沟通内容。
全文概要:智能总结全文内容,一眼秒懂音视频概要内容;
章节速览:智能提炼章节摘要,轻松把握会话脉络,还原交流过程;
发言总结:智能概括发言内容,高效回顾发言人观点;
快速标记:高亮重点、问题、待办,重点信息一目了然;
智能替换:一键替换所有结果,在本次录音后续识别过程中自动替换目标词汇;
轻松下载:支持下载原文、笔记、音视频和译文,一键导出所需内容;支持多种下载文档格式。