两位最近从三一学院(三一学院)毕业的学生利用他们的计算机科学知识,开发了一种新的方法,帮助视障人士在环境中安全地导航.

他们的高级项目, Alisa 莱文 ' 21和Rahul Mitra ' 21成功地建立了一个具有成本效益的“实时物体检测辅助视障.骑在一根白色的手杖上, a microcomputer with a camera uses machine learning to determine what’s in the path of a visually-impaired user; that information is announced aloud by the user’s smartphone, 哪个是通过蓝牙连接到微机的. 查看项目的简短视频演示 在这里.

Alisa 莱文 ' 21和Rahul Mitra ' 21计算机科学高级项目
拉胡尔·米特拉21和艾丽莎·莱文21带着他们的“视障人士实时物体检测辅助设备”.’

莱文, 他在纽约主修计算机科学,辅修模型和数据, 和密特拉, 他来自加尔各答,主修计算机科学和物理学, 印度, 每个人会开始攻读博士学位吗.D. 在今年秋天的计算机科学课上. 莱文最近获得了2021年国家科学基金 研究生研究奖学金.

计算机科学教授 彼得一个. 尹, 谁是莱文和米特拉项目的指导老师, 所有计算机科学专业的高年级学生都必须完成为期一年的毕业设计, 实现, 测试一个软件系统. “今年, 第一次, 学生们可以选择分组学习, 哪一个更接近真实的软件开发过程,”尹说.

米特拉想从事与硬件相关的工作, while 莱文 wanted to pursue a project that involved machine learning; their project ultimately incorporated both aspects. 这两位刚毕业的学生利用他们在三一学院的计算机科学课程和研究经验中磨练出来的编程和长期项目管理技能完成了这个项目.

尹说, “他们的项目需要在计算机软件和硬件系统的几乎所有层次的广泛知识和技能——机器学习, 无线通信, 系统编程, 和应用程序设计, 举几个例子. 他们的工作是我近年来指导的最全面的高级顶点项目之一.”

Alisa 莱文 ' 21和Rahul Mitra ' 21计算机科学高级项目正如他们在他们的项目摘要中陈述的,大约是2.全世界有20亿人有某种形式的视力障碍. 莱文的灵感来源于《大发app下载》, 这是一款将志愿者与寻求帮助的视障用户联系起来的应用,比如澄清毛衣的颜色或阅读罐子上的过期日期. “拉胡尔和我讨论了一个实时物体检测辅助系统的想法,它可以帮助视力受损的人了解他们周围的物品,莱文说:“.

Mitra说, “这个过程使用带有摄像头的便携式微型计算机上的机器学习,这样个人就不会依赖志愿者了. 大发app最新版下载决定把大发app最新版下载的系统安装在一根白色的手杖上——这是视力较差的人通常使用的一种装置.”

来自相机和微型计算机的信息通过蓝牙传输到用户的智能手机上, 哪个以音频形式将它传递给用户, 提醒他们前方的任何障碍. 莱文说:“这种听觉信息的一个例子是,‘一辆车和两个人’。. “大发app最新版下载使用的材料的总成本是245美元, 这是WeWALK拐杖成本的41%, 目前市场上的一种智能手杖. 大发app最新版下载希望大发app最新版下载的设备能成为WeWALK手杖的替代品, 并能进一步提供独特的目标检测功能.”

正如Mitra所解释的,该项目的代码库在代码共享网站Github上是公开的. 他说:“任何开发商都可以从大发app最新版下载放弃的地方继续前进。. “这个项目已经做了很多很好的工作,大发app最新版下载相信保持大发app最新版下载的代码公开将有助于其他想要参与这类工作的开发人员.”

莱文和米特拉承认,他们无法从视障群体那里收集反馈, 他们认识到让能够直接从中受益的个人来测试该设备的重要性.  “如果大发app最新版下载进一步推进这个项目,他们的反馈将是非常宝贵的,有助于大发app最新版下载计划下一步,Mitra说:. “无障碍技术现在是一个巨大的领域. 随着高性能微型计算机的发展, 我相信机器学习与著名的白手杖大规模整合只是时间问题.”

莱文补充道, “大发app最新版下载希望这是迈向机器学习增强工具的良好一步,它可以帮助视障人士在繁忙的环境中导航.”

莱文和米特拉因他们的工作获得了旅行者高级研究奖, 哪个认可一个表现出技术成熟度的优秀高级项目, 完整性, 和相关性. “对于本科生来说,这是一项非凡的成就,”尹教授谈到他们的项目时说.

“与教授合作. 参加尹是一次奇妙的经历,”Mitra说. “大发app最新版下载每隔两周会见他一次,他总是对大发app最新版下载在项目过程中遇到的问题提出独特的观点. 我一直很喜欢他在课堂上的“边做边学”哲学. 在他领导下进行的一个高级项目也是如此,他总是建议大发app最新版下载可以采取的新方法. 教授. 在帮助大发app最新版下载以用户友好的方式将整个系统整合在一起方面,尹起到了特别重要的作用.”

从三一学院毕业后,Mitra将在攻读博士学位的同时进行计算机图形学的研究.D. 在计算机科学中. “三一学院提供的研究机会让我相信,读研对我来说是一个正确的选择,”他说. “从教授那里获得的知识. 尹的编程课程是影响我决定攻读计算机科学研究生的一个关键因素.”

在莱文攻读博士学位时.D. 在计算机科学中, 她计划继续将自己对机器学习和辅助技术的兴趣结合起来. “我非常感谢所有优秀的教员 计算机科学系 感谢在过去四年里对大发app最新版下载的支持。.

阅读更多关于工程和计算机科学专业的高级项目 在这里.

友情链接: 1 2 3 4