包容性 AI · 毕业设计
TaleVision 点视机
把语言转为可触摸图像与声音的 AI 学习教具，探索视障儿童的多感官认知支持。
快速浏览
项目速览
- 我的角色
- 产品、交互与研究设计
- 年份
- 2024
- 协作方式
- 个人毕业设计
- 方法与技能
- 包容性设计
- 用户研究
- AI 原型
关键结果
- 完成软硬件交互原型
- 定义语言到触觉图像的工作流
- 论文发表于《International Journal of Human–Computer Studies》
让语言有形
视觉输入缺失会使物体形态与词义的联系更难建立。
我从视障儿童的语言认知与盲文学习出发，聚焦教具不足、触觉表达有限和学习反馈单一的问题。
研究证据
文献、学校调研和评估共同界定了设计边界。
在上海市盲童学校的调研中，我观察到盲文学习可能带来厌烦和遗忘，现有教具的智能化与多感官支持也较有限。
多模态设计判断
触觉、语音与生成图像被组织为连续的探索路径。
用户朗读盲文后，系统将语音转为图像与音频；图像经二值化和颗粒化处理后，以触点呈现形态线索。
原型实现
软硬件原型验证生成内容到触觉输出的链路。
实体原型以 3D 打印结构、Arduino 多路继电器和微型电磁铁控制触点；生成端试用 DALL·E 3，并用软件流程处理内容转换。
1 / 6
验证与产出
测试验证了原型方向，也记录了进一步改进点。
两位明眼参与者完成了尺寸、材质、颗粒感知和软件流程的可用性评估；视障学校毕业者的评估也为触觉呈现的意义和局限提供了反馈。
局限与下一步
这是一项可行性探索，不是长期学习效果的结论。
复杂物体和诗句的生成表现较弱，二维触点也难以表达立体形态；下一步应提升稳定性、探索高度变化的触觉表达，并在真实学习场景中长期评估。