体型を考慮した衣服画像の変形による画像ベース仮想試着システム

Abstract

We propose an image-based virtual fitting system to reproduce the appearance of fitting during online shopping for garments. Inputs are whole-body images of a fashion model and the customer. We create a garment image by cutting out the garment portion from the image of the fashion model. If the garment images were na¨ıvely superimposed, the fitting result would look strange mainly because the shape of the garment will not match the body shape of the customer. In this paper, we therefore propose a method of reshaping the garment image based on human body shapes of the fashion model and the customer to make the fitting result more realistic. The body shape is automatically estimated from the contours of the human body, and can easily be retouched if necessary. The fitting result is refined further by automatic color correction with reference to the facial regions and a method of retouching parts that protrude from the rear of the garment image. We verified the effectiveness of our system through a user test.

概要

衣服のオンラインショッピングにおいて試着を再現するための画像ベース仮想試着システムを提案する．本システムの入力はファッションモデルと試着を行う顧客の全身画像である．衣服画像はファッションモデルが着用した画像から衣服部分を切り抜いて作成する．単純に画像を重ねて合成すると，衣服の形状が顧客の体型に適合しないため，違和感のある試着結果となってしまう．そこで本研究では，人物の体型に基づいて衣服画像を変形する手法を提案する．試着する衣服を着用したモデルと仮想試着を行う顧客の体型を推定することで衣服画像を体型に合わせて変形させ，現実に近い試着結果を提示する．体型は人体の輪郭から自動的に推定され，必要に応じて簡単に修正することができる．さらに，既存手法による顔領域を参照した色補正と，試着した衣服画像の裏からはみ出した部分を修正する手法を組み合わせ，より実際の試着に近い仮想試着結果を提示する．

Video

Publication

• 山田 裕貴, 金森 由博, 三谷 純, 福井 幸男: "体型を考慮した衣服画像の変形による画像ベース仮想試着システム"，情報処理学会研究報告　グラフィクスとCAD研究会報告, Vol. 2014, No. 8, Pages. 1-8, 2014-2. (PDF)
  
  
• Hiroki Yamada, Masaki Hirose, Yoshihiro Kanamori, Jun Mitani, Yukio Fukui, "Image-Based Virtual Fitting System with Garment Image Reshaping", Cyberworlds 2014, Santander, Oct. 6-8, 2014. (PDF)