“紫东太初”全模态大模型发布 AI听《月光曲》就能聊贝多芬
(资料图片仅供参考)
湖北日报讯(记者张真真、通讯员詹欣芮)透过《月光曲》就可以畅谈贝多芬的故事,在三维场景里实现精准定位,通过图像与声音结合完成场景分析……6月16日,在人工智能框架生态峰会2023上,中国科学院自动化研究所联合武汉人工智能研究院正式发布“紫东太初”全模态大模型,种种新奇表现赢得现场观众热烈反响。
“紫东太初”全模态大模型,是在千亿参数多模态大模型“紫东太初”1.0基础上升级打造的2.0版本。
2021年9月,中国科学院自动化研究所成功打造了“紫东太初”1.0多模态大模型,贯通语音、图像、文字等信息。比如,AI(人工智能)在学习时,“看到”猫的图像或者听到猫的叫声,就能准确识别出是猫。
除“图-音-文”外,“紫东太初”2.0加入了视频、传感信号、3D点云等更多模态,完成了音乐、图片和视频等数据之间的跨模态对齐,能够处理音乐视频分析、三维导航等多模态关联应用需求,并可实现音乐、视频等多模态内容理解和生成。
中国科学院自动化研究所相关负责人表示,从1.0到2.0,“紫东太初”大模型打通了感知、认知乃至决策的交互屏障,使人工智能进一步感知世界、认知世界,从而延伸出更加强大的通用能力。
“紫东太初”2.0以自动化所自研算法为核心,以国产化基础软硬件平台昇腾AI为基础,依托武汉人工智能计算中心算力支持,着力打造全栈国产化通用人工智能底座,协同构建我国通用人工智能自主可控发展生态。
目前,“紫东太初”大模型已展现出广阔的产业应用前景,在神经外科手术导航、短视频内容审核、法律咨询、医疗多模态鉴别诊断、交通违规图像研读等领域开始了一系列引领性、示范性应用。
在医疗场景,“紫东太初”大模型部署于神经外科机器人,可实现在术中实时融合视觉、触觉等多模态信息,协助医生对手术场景进行实时推理判断,并尝试在人类罕见病诊疗这个挑战性医学领域有所突破。
相关新闻
- “紫东太初”全模态大模型发布 AI听《月光曲》就能聊贝多芬
- 头条:安胜勋
- 全球快报:天天快看:这一AI细分领域受关注!近一个月涨超20% 相关公司积极回应产品布局
- 便宜上千万,杭州保姆纵火案房源成交-关注
- 天天精选!单说“记录日志”机制没什么对错,但还需要通过新技术来克服提高效率
- 房地产泡沫风险严峻,未来这2样“东西”更重要,你准备好了吗?-时快讯
- 哈佛校训20条人生箴言_哈佛的20条校训
- 资讯推荐:被控受贿3078万余元,国开证券原总裁侯绍泽当庭认罪悔罪
- 2022年山东共开展内审项目58575个 促进增收节支31.51亿元
- 即时看!2023 CICF广州暑期嘉年华「自由行名单」公布!
- 最新快讯!国外的csgo饰品交易平台 前十名开宝箱APP排名
- 全球信息:比尔·盖茨拜访中国国家卫健委
- 耶伦声称中国没有资格得到世界银行贷款,外交部回应 环球聚焦
- 环境科学与工程可以考哪些大学 环境科学与工程学校排名
- 今日报丨中使馆:菲律宾发生6.2级地震 暂无中国公民伤亡报告
- 即时看!千只鸭子大军给水稻除草,农场主:用了快十年,效果很好!
- 全球观天下!离谱!高呼马龙是湖人的爹!约基奇妻子被砸酒瓶!
- 暮光之眼出装s10_暮光之眼出装 焦点要闻
- 中雨、大雨、暴雨!河南一大波雨水正在路上!_世界观点
- 全球微动态丨普通人也能玩转动捕?只要你有苹果随身三件套就行