新研究利用人工智能将大脑信号转换成语音和动画表情
美国加利福尼亚大学旧金山分校近日发布公报说,新研信号该校参与的究利研究团队开发出一种脑机接口,通过训练人工智能算法,用人音和成功将一名因脑干中风而严重瘫痪的工智女性的大脑信号转换成语音和动画表情,使这名女性患者能够通过“数字化身”与人交流。大脑动画 加州大学旧金山分校和伯克利分校等机构研究人员在这名瘫痪女性大脑表面植入一个由253个电极组成的转换薄如纸张的矩形设备。这些电极覆盖了对语言功能至关重要的成语大脑区域。研究人员用一根电缆插入固定在患者头部的表情接口上,将电极与一组计算机连接起来。新研信号 构建这套系统后,究利研究团队在数周时间里对人工智能算法进行系统训练,用人音和以识别这名女性患者独特的工智大脑语音信号。这需要不断重复不同的大脑动画语句,涉及1024个单词,转换直到计算机能识别与患者声音相关的成语大脑活动模式。 研究人员并没有训练人工智能识别完整的单词,而是创建了一个系统可根据最小的语音单位音素来解码单词。就像字母组成书面单词一样,音素组成了口语单词。例如,英文单词“Hello”包含HH、AH、L和OW四个音素。利用这种方法,计算机只要学习39个音素就能破译任何英文单词,这提高了系统的准确性和运算速度。 为了重现患者的声音,团队设计了一种语音合成算法,利用患者在自己婚礼上的讲话录音将语音个性化,使之听起来像她受伤前的声音。 研究人员还借助一款可模拟面部肌肉运动并制作动画的软件为患者制作动画头像。研究人员创建了定制的机器学习过程,使这款软件能够识别这名女性试图说话时大脑发出的信号,并将这些信号转换成能够表示快乐、悲伤和惊讶等情绪的面部动画。 相关论文近日发表在英国《自然》杂志上。团队下一步计划创建该系统的无线版本,使患者无需与脑机接口进行物理连接。
- 最近发表
- 随机阅读
-
- 锦绣中国年丨民俗非遗之西安鼓乐
- 木星伴月,腊八见!
- 科学新发现丨天文学家发现有史以来最古老的黑洞
- 重庆三峡库区危岩地灾防治有了“千里眼”
- 胖东来未按标准试吃员工已不再开除,关联公司2022年333人参保
- 木星伴月,腊八见!
- 武汉海关助力孝感米酒走俏海外
- 国网首个监控系统全直流供电变电站在杭州萧山落地
- 厦门火炬元宇宙公共技术服务平台揭牌
- 央地合作发展现代农业 四川富顺打造中铁金仓助力产业融合
- 航天科技四院多项“快件”赴“天宫”
- 3小时交会对接模式成功解锁
- AI文生视频效果“炸裂”,未来扔一部小说出一部大片?
- “尔滨”又整活!冰雪大世界为来年“上新”提前存冰
- 2023年企业享受研发费用加计扣除金额达1.85万亿元
- 中东部大部地区气温下降6℃至10℃ 专家解读今年首场寒潮有多强
- 新研究颠覆传统星系形成理论:黑洞成恒星诞生与星系形成助推器
- 促就业、护出行、治欠薪——2024“春暖农民工”行动启动
- 湖北首例!协和医院成功开展单纯小肠移植术
- 2024年青岛萝卜·元宵·糖球会将于正月初九启幕
- 搜索
-