传媒资讯 VTC文摘 VTC文摘 2024

窝心的母亲节礼物 遥距指导长辈使用电子产品
HKIIT团队研发「Dokodemo Call 随意通」 揉合AR于视像通话

最后更新 2024年05月06日
  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-1

    HKIIT团队开发「Dokodemo Call 随意通」的手机应用程式,内设的视像通话功能,利用AR科技加入不同图示,将抽象对话图像化。作品于「2023香港资讯及通讯科技奖」获得学生创新(大专及学士)金奖。左起:HKIIT高级讲师郭誉豪、VTC软件工程高级文凭毕业生黄俊、程振雄、余荣焯,以及HKIIT讲师雷华康

  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-2

    子女可使用「Dokodemo Call 随意通」教长辈操作洗衣机。用家与教导者视像通话时,可先用镜头对准电器或电子产品,让电话另一端的教导者清楚看到仪器,并能实时在视像画面中添加不同颜色的AR图示,如圆圈、旋转符号等,方便用家即时在画面中看到图示,二人边对话边以AR图示辅助说明

  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-3

    子女可使用「Dokodemo Call 随意通」教长辈操作洗衣机。用家与教导者视像通话时,可先用镜头对准电器或电子产品,让电话另一端的教导者清楚看到仪器,并能实时在视像画面中添加不同颜色的AR图示,如圆圈、旋转符号等,方便用家即时在画面中看到图示,二人边对话边以AR图示辅助说明

  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-4

    「Dokodemo Call 随意通」内有不同颜色的AR图示,如箭咀、圆圈、交叉等,实用性强,方便指示

  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-5

    软件工程高级文凭毕业生黄俊(左)与妈妈(中)感情要好,黄俊妈妈得悉爱儿为她开发「Dokodemo Call 随意通」手机应用程式并获得多个奖项,感到自豪和欣慰

  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-6

    HKIIT高级讲师郭誉豪(右)、VTC软件工程高级文凭毕业生黄俊(左)凭「Dokodemo Call 随意通」作品获得多个中港创科比赛奖项

  • Inspired-by-Mothers-experience-HKIITs-team-Develop-AR-Video-Call-Programme-Dokodemo-Call-to-Guide-Elderly-to-Use-Electronic-Devices-7

    负责带领项目的HKIIT高级讲师郭誉豪(左)分享创作灵感源自有一次外母因不懂使用新买的洗衣机而致电求助,他发现透过电话语言描述启动洗衣机的步骤,表达并不容易,他向学生分享此经历,并鼓励同学利用科技构思解决方案

随著资讯科技的迅速发展,「数码鸿沟」的现象逐渐浮现。其中,长者和弱势社群往往因电脑及资讯科技应用上的技能和知识不足,在日常生活上更易遇上困难。当长辈不懂使用电子产品或电器时,晚辈或子女能亲身耐心教导固然最好,但万一无法面对面提供协助而需遥距指导,过程便变得份外「头痕」。

香港资讯科技学院(HKIIT)老师及职业训练局(VTC)软件工程高级文凭毕业生最近开发一个名为「Dokodemo Call 随意通」的手机应用程式,内设的视像通话功能与别不同,可利用扩增实境(Augmented Reality,AR)科技加入箭咀、圆圈、手指、代表步骤的数字等不同图示,将抽象对话图像化。作品曾于多个公开比赛获奖外,团队成员更亲身试用应用程式教妈妈在电视机上「追台」,尽展孝心。母亲节将至,除一束美丽鲜花外,有没有想过送一份贴心的科技产品,充当妈妈或婆婆生活的「小帮手」之余,亦能拉近家人的距离?

外母求助教用新洗衣机成研发契机 作品有如「随意门」

「Dokodemo Call 随意通」取名自日本经典漫画主角的法宝「随意门」(Dokodemo Door),象征可随心所欲前往任何地方,研发团队同样希望他们设计的应用程式能打破地域限制,让沟通变得更有效,如同亲临协助。

负责带领项目的HKIIT高级讲师郭誉豪分享创作灵感源自生活,他说:「有一次我在上课期间突然收到外母的『求救电话』,当时外母刚购入新的洗衣机,配备不同的新功能,但当她要使用时始发现无从入手,对于新款电器愈多功能,操作愈见繁复感到无奈。我著外母先冷静,再透过电话慢慢描述启动洗衣机的步骤,但发现单凭言语表达并不足够。」他向学生分享此经历,并鼓励同学利用创新科技构思解决方案。

视像通话结合AR图示

开发团队成员包括软件工程高级文凭毕业生黄俊(Vincent)、余荣焯(Marco)及程振雄(Tommer)。Marco指使用手机、操作家庭电器和重设Wi-Fi讯号等,对年轻人来说是平常的日常事宜,但对长者来说确是难以上手。电子设备五花八门,操作复杂,利用电话单靠语言指示亲友操作电器和电子产品往往「鸡同鸭讲」,难以表达外,又容易出现误解,更有机会产生小争执而影响关系。

有见及此,团队开发的「Dokodemo Call 随意通」手机应用程式便将AR技术融入视像通话中。Vincent介绍:「当长辈使用『Dokodemo Call 随意通』应用程式与子女视像通话时,可先用镜头对准电器或电子产品,让电话另一端的子女清楚看到仪器,此时,子女可实时在视像画面中添加不同颜色的AR图示,如箭咀、旋转符号、圆圈、交叉、步骤数字等,长辈即时可在画面中看到图示,二人边对话边以AR图示辅助说明,呈现指示和步骤。」

团队成员Tommer表示,此应用程式揉合多种科技,如云端技术、AR科技、网页即时通讯(Web Real-Time Communication,WebRTC),以及智能手机的光学雷达感测空间技术,让应用程式能辨认镜头对准的电器,用家添加了AR图示符号后,符号能跟随手机移动而改变角度和大小,令双方透过视像通话沟通时能更准确解说。另外,「Dokodemo Call 随意通」亦配备录影功能,能储存教学影片供长者随时重温。

邀请年长亲友试用 横扫业界奖项

为提升作品的实用性和令作品更适合「老友记」使用,团队积极优化用户体验设计(User Experience Design,UX),他们特意邀请十多位年长的亲友试用和收集用家意见了解回馈。由于试用者反映AR图示太小和缺乏颜色选择,于是他们新增AR图示放大缩小的功能和添加其他颜色,令作品更适合银发一族使用。

团队凭此作品参与多个中港创科比赛,屡获殊荣,包括获「2023香港资讯及通讯科技奖」学生创新(大专及学士)金奖、「2023亚太资讯及通讯科技大奖」(学生类别—专上学生项目)大奖、香港科技园「IDEATION」计划的十万港元种子基金、「第9届香港大学生创新及创业大赛」资讯技术组别二等奖、「杨建文青年工业发展培育计划」资讯科技学科组别的亚军及最佳录影奖、「中国高校计算机大赛—移动应用创新赛」一等奖。团队除夺得合共约15万元奖金外,更获得不少展览机会,与业界交流所学。

妈妈试用后感欣慰 望可推出市场

花尽心思开发作品,最终更成功孝敬家中长者,Vincent的妈妈便是受惠者之一。她忆述:「记得有一次我正在家看电视,突然讯号接收不稳,我措手不及,急忙致电儿子寻求解决方法。儿子著我重新『追台』,他一度想透过电话简单解释步骤,岂料三言两语根本无法清楚表达,加上电视遥控器上的按钮五颜六色,更要在萤幕主菜单点选不同选项,看得我一头雾水,纠缠约半小时仍未能解决。此时,儿子便建议使用『Dokodemo Call 随意通』,他在视像画面上圈上要按的按钮,以图示指明主菜单应选的选项,不足十分钟已顺利解决问题!」Vincent妈妈大赞应用程式简单易用,令不谙电子科技的长者亦能轻易上手。她被儿子的心意和专业技能所感动,她说:「最意想不到的是儿子竟懂得开发一个全新的手机应用程式协助长者,我为他感到很自豪!我希望应用程式可尽快推出市场,助其他孝子贤孙解决父母的『奇难杂症』。」

三位成员现已升读本地大学电脑科学相关的学士学位课程装备自己,并创立初创公司发展作品。他们正研究在此应用程式的系统中加入人工智能科技,利用手机镜头辨识电器种类,并即时在网上搜寻相关说明书协助用家操作。三人期望日后与智能设备公司及安老服务社企合作,供长者与照顾者试用系统,进一步完善通话功能及界面设计。