中新健康|复旦大学团队研发AI大模型 助视障者“看见”世界

来源: 半月谈
2024-06-26 17:27:33

  2023年上半年,复旦大学自然语言处理实验室发布了开发MOSS对话式大型语言模型,被称为中国版的GPT,仅用半年时间多模态模型“眸思”问世。据介绍,“眸思”和基于文本的MOSS不同,它能够理解并识别图片内容,致力于成为视障者的一双“眸”。

  基于“眸思”,“听见世界”APP为视障者日常生活需求量身打造街道行走模式、自由问答模式和寻物模式。在街道行走模式中,“眸思”如一位忠实的向导。红绿灯、十字路口、障碍物……它能细致扫描道路情况,提示潜在风险,陪伴视障者安全通行“看不见”的漫漫长路。

  在自由问答模式中,“眸思”则像一位贴心的朋友,走进博物馆、艺术馆、公园……捕捉四周景象的每个细节,用声音构建丰富的生活场景,传递每一处日常之美。在寻物模式中,“眸思”将成为一名可靠的管家,被移动过的手杖、最爱口味的牛奶……它可以让视障人士找寻日常物件变得轻松。

  复旦大学自然语言处理实验室张奇教授说:“人工智能发展日新月异,科技应该要改变更多人的生活,希望‘眸思’能够帮助视障人士走出家门,让他们可以尝试更多工作,为人生书写更多可能。”据介绍,该项目的主导者都是“初出茅庐”的学生们,在组内头脑风暴会上,年轻学子总能提出开创性想法,能够找到另辟蹊径的解决办法。

  自去年9月以来,复旦大学自然语言处理实验室围绕GPT4-v复现多模态大模型,对核心关键点开展研究,希望提升单项任务的准确率和强化大模型的学习。为了更好地感受视障者的难处,团队成员模拟真实情境,蒙眼探索视障者“黑暗”世界。他们邀请视障人士加入,进一步摸 清真实而具体的需

  在基于几亿张图片训练出“眸思”大模型基础上,针对视障者提出的各类需求,团队又用上万张图片进行特殊样本训练,使“眸思”具备能够适配更多场景的能力。据透露,今年上半年,团队将结合AR升级APP内的定位精度细化至亚米级别。下半年,团队希望将“眸思”升级为基于视频的判断。目前,更多模式正在开发中,比如,阅读模式、解说模式等。

  美国联邦政府首次正式涉足人工智能监管领域是在2020年1月,当时发布了《人工智能应用监管指南》,为新出现的人工智能问题提供监管和非监管措施指引。2021年出台的《2020年国家人工智能倡议法案》更多算是在AI领域的政策布局,与人工智能治理和强监管还有一定距离。一年后,白宫于2022年10月发布的《人工智能权利法案蓝图》(简称“《蓝图》”)为人工智能治理提供了支持框架,但并不是美国官方政策,不具备约束力。

  2022年9月22日,受贿1.17亿余元的傅政华被判处死刑,缓期二年执行,剥夺政治权利终身,并处没收个人全部财产,在其死刑缓期执行二年期满依法减为无期徒刑后,终身监禁,不得减刑、假释;对傅政华受贿犯罪所得及孳息依法予以追缴,上缴国库。

  据台湾《联合报》报道,中国国民党主席朱立伦今天(5日)在中常会表示,中国国民党2024台湾地区领导人参选人侯友宜提出非常明确的两岸、能源、防务安全及未来如何打击犯罪、去除弊案等政策,代表中国国民党的决心,中国国民党皆表达最高肯定与全力支持。

  另外,2014年9月12日,微信公众号“石大人生活圈”曾经发布文章《大学是你们新的起点——致石大14级新生》,在这篇文章中,有这么一段话,“机械与储运工程学院2014级本科生董某某代表新生发言,号召同学们早日树立理想目标,尽快适应大学生活,不断提升综合能力。”新闻来源为中国石油大学新闻网。

  政知君注意到,6月28日,全国人大官网发布的消息显示,全国人大常委会代表工作委员会设置了一位主任、两位副主任,副主任中还有一位是女性。

  这些遗憾、失落,都是李玟曾经不愿提起的隐痛。她长期戴着阳光灿烂的面具,骗过了所有人,似乎也骗过了自己。而就在她患上抑郁症,却也慢慢学会接受、表达情绪,不再为难自己时,心魔还是带走了她。2023年5月20日,李玟发布了一条微博,其中有她的新作《战歌》的歌词:伤痛过,血泪模糊过,怀疑过,也重新来过,向命运承诺。这段话,仿佛透露着她一定要坚持到底的心情。只是这次,她没能走出伤痛,没能穿越血泪。她留下了那些让人们感到快乐的记忆,也留下一片错愕和遗憾。

张博育

声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
用户反馈 合作

Copyright © 2023 Sohu All Rights Reserved

搜狐公司 版权所有