淘宝借AI为视障用户“清障”:概括读取商品信息,节省近80%听图时间

2023-07-26 来源:中国公益报道网

  视障群体可以上淘宝购物吗?不仅能,并且完全可以独立操作。7月24日阿里巴巴集团发布的《环境、社会和治理报告(2023)》(即“ESG报告”)显示,淘宝和天猫APP通过读光OCR技术,把文字转为语音,帮助了超过32万视障人士“听图购物”。

  这背后是一群工程师十几年如一日,通过技术手段“修盲道”,不断优化视障群体的购物体验。近期,工程师们又给淘宝上的“盲道”做了一次疏通清障。这次,他们借助了生成式人工智能(AIGC)提取商品详情页上的关键信息,视障消费者触摸到页面相应区域后,高度概括版本的商品信息,包括品牌、功能、使用方式等核心信息,将自动转化为语音输出,消费者能够更便捷高效地“听图”。

  “商品详情页里的文字内容往往很多,如果每次都完完整整听下来,会耗费消费者很多时间,而且也很难抓住重点。”淘天集团无障碍技术工程师曹西告诉记者,“读屏内容过于繁琐”是他们和视障用户的交流中被提及最多的问题,也是OCR技术所解决不了的问题。

  团队想到了眼下大热的AIGC。语言大模型经过一定的训练,完全可以具备提炼核心信息的能力。曹西介绍,团队希望最终的信息提取结果能够准确、简明、口语化。经过大致的估算,最终上线的版本能以缩减原始信息近80%的篇幅,并清晰概括商品特征,大大节省了消费者的时间。

  因为身体行动不便、再加上智能手机一般都有默认读屏系统,视障群体其实十分乐意用手机网购,但默认系统和第三方读屏软件往往很难支持顺畅的购物体验。淘宝自2011年起启动无障碍化工作,团队早已形成一个共识,无障碍有问题就等同于产品有BUG,每一名用户都应该平等地享受科技所带来的便利。

  “我能感觉到淘宝的功能一直在改进,不过还是提个小小的建议,个别时候搜索框不那么容易摸到,有什么办法么?”视障用户小飞感觉详情页读屏功能改进体验很不错,但也忍不住给工程师们下了新的“需求”。

  “用户经常给我们‘下需求’,这也是我们最重要的目标指引。能借技术为视障群体做一点实事、让生活变得更美好一点,让我们这些技术人很有成就感。”曹西说。

  借AI技术升级“盲道”,是淘宝利用技术升级平台基础建设的举措之一。今年5月,淘宝天猫确立了三个面向未来的变革方向:用户为先、生态繁荣、技术驱动。其中提到,淘天集团将借助科技和数据能力,创造AI时代全新的用户产品和服务。如,未来五年内,淘宝将实现商家运营工具的全面智能化、并且全免费,最终为商家极大地降本、提效。

  与此同时,和AI相关的小而美的商品和服务,还被淘宝上敏捷灵活的中小商家做成了一门大生意:在淘宝上,有程序员通过AI运算还原四维彩超图,帮助准爸妈描绘未来宝宝的模样,开张第二个月就做了1500单生意;有创业者用AI算法制作能“说话”的虚拟人物,还原逝者的音容笑貌,3个月抚慰了100多位失去亲人的伤心人……

  平台和商家一起,努力让AI真正普及、普惠,更好地服务消费者。

上一篇:传播易为电视广告植入提供新思路

下一篇:北京45家社区青年汇帮家长带

猜你喜欢

“薇笑阳光计划”见证中国品牌担当,薇诺娜树立专业公益新标杆

高原紫外线强度远超平原地区,长期暴露不仅导致皮肤晒红、晒黑,更可能引发光线性皮炎、色素性疾病甚至皮肤癌前病变。然而,由于医疗资源匮乏、防晒意识薄弱,很多当地居民直至病情严重才寻求治疗,错失最佳医学干预

2周前

从受助者到“燃灯者”:富邦华一“优师计划”助学金结出硕果

自2021年承担国家“优师计划”培养使命以来,华东师范大学以孟宪承书院为育人平台,创新构建“优师筑梦DREAM行动计划”,聚焦五维能力即奉献精神(Devotion)、反思探究(Reflection)、

3周前

发挥供应链优势,京东调集物资支援北京防汛

近日,北京市密云、怀柔等地以及河北省承德、张家口等多地持续强降雨引发严重洪涝灾害,国家防汛抗旱总指挥部针对北京、天津、河北升级启动防汛三级应急响应。灾情刻不容缓,各地加紧抢险救灾,有关受灾地区救援救治

1个月前

官宣|贵州省博物馆和天河潭景区正式合作,即日起逛省博免费送天河潭大门票啦

2025年7月1日天河潭景区与贵州省博物馆已正式签订合作协议。合作期间双方将共同实践文旅融合示范的新经验和新思路,共同努力为广大游客提供更多新玩法和新体验。即日起预约贵州省博物馆成功的游客,将同时免费

2个月前