寻路问学,尽在路问 - 路问教育(www.luwen.cn)欢迎您! 全国客服电话: 400-0909-044 网站导航 培训机构 中职学校 国际学校 平台介绍 招生合作 平台客服 公众号 公众号 扫描二维码关注公众号 路问培训网首页
当前位置: 路问培训网 行业动态 复旦团队研发AI大模型,助力视障群体“洞察”世界

复旦团队研发AI大模型,助力视障群体“洞察”世界

栏目:行业动态 发布时间:2024-03-07 10:59 来源: 路问教育 阅读量:5

报名、考试、查分免费提醒 申请试听课程
我已阅读并接受《用户协议》《隐私政策》

摄像头配耳机,视障者出行更安心。场景描述、风险预警,一应俱全。复旦大学自然语言处理实验室(FudanNLP)推出“复旦·眸思”(MouSi)系统,专属App“听见世界”即将亮相。预计今年3月首轮测试,一二线城市率先体验,逐步全国推广。

 

助力视障者“看”世界

“听见世界”App有三种工作模式。一是街道行走模式,它可以细致扫描道路情况,发现红绿灯、十字路口、障碍物等,提示潜在风险;二是自由问答模式,它可以带着视障人士走进博物馆、艺术馆、公园,捕捉四周景象的每个细节,用声音构建生活场景;三是寻物模式,它可以及时帮助主人找到不知道被放在哪里的手杖、不同口味的牛奶等。

据悉,我国盲人数量有1700多万,但在街上很少看到盲人出行。一个重要的原因是他们出门要面对大量不安全因素,难以独自成行。

复旦大学自然语言实验室张奇教授介绍,“听见世界”App项目的主导者都是“初出茅庐”的学生,在组内头脑风暴会上,年轻学子总能提出开创性想法”。

该项目团队共计吸纳了从本科生到博士生共25名复旦学子以及桂韬等多位教师、专家的加入。为了更好地感受视障者的难处,团队成员同样模拟真实情境,蒙眼探索视障者“黑暗”世界,并邀请视障人士加入,进一步摸清真实而具体的需求。在基于几亿张图片训练出的“眸思”大模型基础上,针对视障者提出的各类需求,同学们又用上万张图片进行特殊样本训练,使“眸思”具备能够适配更多场景的能力。未来,该项目还会开发更多的使用模式,比如阅读模式,服务盲人朋友点菜、读书等场景;解说模式,承担无障碍电影解说员的工作。

报名、考试、查分免费提醒 申请试听课程
我已阅读并接受《用户协议》《隐私政策》

路问招生网是全国培训机构、中专、职业学校、技校、中职学校、单招、中考、高考、国际学校等招生信息的查询平台。

品牌故事
路问教育由深耕教育行业20年的团队创办,“路问”商标于2011年获国家商标局正式批复并成功注册。
路问

关注路问招生公众号
招生学校 、专业查询
政策、报考尽在掌握

Copyright © 2011 路问招生网版权所有 备案编号:川公网安备 51019002004404号 蜀ICP备2021024436号-1
取 消 发送