AR-based interactive virtual try-on system
 

(交互式虚拟试衣系统)

  • 问题

尽管电子商务提供了便利,但在线服装购物仍会带来与产品相关的各种风险,因为消费者既无法亲眼目睹也无法亲自试穿产品

购物环境中的社交互动可以改善消费者的购物体验,使消费者们有机会交换时尚理念,共享服装并建立相互之间的亲密关系。 但是,消费者在网上购物时并不总是有机会进行和他们的朋友进行社交互动

我们提出了一种新颖的虚拟试衣系统以提高用户与系统,用户和用户之间的交互。我们适用了以用户为中心的设计过程,根据我们的发现进行构想和研究,创建几个原型与用户一起测试想法和假设。最终我们提出最佳的设计方案。

  • 类型

与日本乐天公司的合作项目

  • 项目方面

研究,构想,原型设计,评估

  • 我的角色

UI和交互设计,原型构建

为基于AR/VR虚拟试衣间研究的构想和原型评估做出贡献

  • 时间线

2019.09 - 2021.02

  • 成果

我们制作了一个系统,以解释问题和解决方案。我们参加了HCI领域的国际会议并上发表论文。

Yuhan Liu, Yuzhao Liu, Shihui Xu, Jingyi Yuan, Xitong Sun, Kelvin Cheng, Soh Masuko, Jiro Tanaka: 3D Virtual Try-On System Using Personalized Avatars: Augmented Walking in the Real World. The Thirteenth International Conference on Advances in Computer-Human Interactions (ACHI 2020), 391-398, November 2020 http://iplab.jpn.org/paper/achi2020liu.pdf

我们还撰写了25页的学术期刊,概述了我们的研究过程并突出了我的贡献。

Yuzhao Liu, Yuhan Liu, Shihui Xu, Kelvin Cheng, Soh Masuko, Jiro Tanaka: Comparing VR- and AR-Based Try-on Systems Using Personalized Avatars, Electronics 2020, 9(11), 1814; https://doi.org/10.3390/electronics9111814, November 2020 http://iplab.jpn.org/paper/liu_elec.pdf

  • 构思与原型设计

我们考虑了现实购物中影响购物体验的因素(动作,身体,衣服,试穿的环境), 我们设计的基于AR的虚拟试衣尽可能的模拟了现实试衣的各种因素。

broken image
broken image
  • 设计

基于全息,增强现实的手机端交互试衣系统的设计面临很多挑战

(a)如何生成和真实人体相似的虚拟人物,用于虚拟试衣-> 应用deep learning 技术,我们基于用户的脸部和身体图片生成用户的虚拟人物

(b)如何提高衣服的真实感-> 应用布料模拟技术,模拟衣服的材质和褶皱,增加真实感

(c)如何在AR中,与现实物体进行有效的试衣交互-> 用户可以将自己的虚拟身体放到现实世界中,进行虚拟试衣,也可以在现实世界中切换虚拟人物的动作来查看衣服的动态效果。

broken image

(d) 在AR中实现多用户之间的社交互动->允许用户与他人进行社交共享他们直观的虚拟试穿体验,从而使他们也能够获得快速反馈。 用户可以在自己的身体上或其他用户的身体上试穿衣服。 他们还可以互相帮助做出决定,并找到彼此的最佳匹配.

broken image

Result – 对照试验

我们邀请了12位女性用户来参加我们的实验(拥有3年以上的购物经历,有相关的AR,VR的知识)

我们为了测试系统的可用性,将传统的购物界面,现有的VR试衣间,和我们提出的基于AR的试穿体统相比较。

基于AR的虚拟试衣提供了更好,更逼真的服装可视化,给用户提供了新颖的交互体验

  • 定量研究
broken image
broken image

定性研究

broken image