こんにちは。ML・データ部データサイエンス1ブロックの尾崎です。データサイエンス1ブロックでは機械学習モデルや、データ分析によって得られたルールベースのモデルの開発をしています。特に、ZOZOTOWNやWEARの画像データを扱っています。 本記事では、教師データがないPoC特有の「モデルの評価をどうするか」という課題への対策を商品画像の色抽出の事例とともに紹介します。教師データが無いという同じ境遇に置かれた方々の一助となれば幸いです。 目次 目次 事業上の課題 どのようなモデルを作ったか モデルの評価をどうしたか 何を正解ラベルとするか アノテーションを外注するか、内製するか 評価指標の設計をどうしたか まとめ 参考 事業上の課題 アパレル商品の検索において、カラーは重要な要素の1つです。ZOZOTOWNでは15色のカラー（図1）を指定して検索できますが、より細かな粒度で商品を検索したいユ

「オフィスカジュアルって何」「どのへんがストリート？」──多くの人が頭を悩ませる曖昧なファッション用語。そうした表現を含む質問にAIが自動で回答する技術をZOZO研究所と早稲田大学の研究グループが開発した。 全身のコーディネート画像に「♯カーディガン」「♯キレイめ」「♯カジュアル」などアイテムの座標と曖昧な表現を多く含む複数のタグを付与。それらを自動的に学習・解釈し、関係性を明らかにするAI技術を開発した。さらに活用方法も提案している。 例えばあるコーディネート画像を見た利用者が「このファッションのどのあたりがストリートですか？」と問えば、ストリートのタグが付与されたアイテムを赤く表示する（ヒートマップ）。「このファッションを少しフォーマルにすると？」という問いには一部を入れ替えた画像を使って新アイテムを提案できる。 研究グループは「ファッション分野特有の曖昧性はユーザーが新しいジャンルの

同店舗は販売を目的としない「売らない店」だ。来店客は事前にファッションの好みや悩みをインターネットを通じたアンケートで回答する。来店時は、独自のAI（人工知能）サービスとプロのスタイリストに相談。1人当たり2時間以上かけて似合いのコーディネートを提案する。最後はプロのヘアメークを受け、気に入ったスタイリングで写真撮影をして終了だ。これら一連のサービスはすべて無料となる。 来店は完全予約制。対話アプリ「LINE（ライン）」の専用アカウントから応募し、当選者が店に訪れる。来客数は1日当たり4～5人を想定しており、年間で1000人程度を見込んでいる。サービスを受けた来店客に商品情報が登録されたQRコードを送り、ZOZOのEC事業サイトへの流入を促す。 表参道に店舗を構え、プロのスタイリストを採用するなど、似合うラボのサービスを無償提供するにはコストがかかる。ZOZOの澤田宏太郎社長は「似合うラボ

また、ZOZO自身でもZOZOSUIT 2の技術を活用したボディマネジメントサービス「ZOZOFIT」を2022年夏に米国で展開予定。ZOZOFITを着た状態でスマホを使って体型を計測し、身体の3Dモデルを作成。体型管理が簡単にできるという。ただし、ZOZOFITの日本展開については今のところ検討中としている。 関連記事 全身を瞬時に採寸、ボディスーツ「ZOZOSUIT」無料配布　「ぴったりの服」注文可能に 「人が服に合わせる時代から、服が人に合わせる時代へ」――身体を瞬時に採寸できるというボディスーツ「ZOZOSUIT」の無料配布がスタート。「ぴったりの服」をネット注文可能に。 ZOZOSUIT 2登場　マーカー数50倍、計測アルゴリズム改善で精度向上 ZOZOが「ZOZOSUIT 2」を発表した。採寸用マーカーの数やデザイン、計測アルゴリズムなどを改善し、より精密な3Dモデルが作れるよ

ZOZOテクノロジーズは9月2日、服のコーディネート約255万件とアイテム約200万件などを含むデータセット「Shift15M」をオープンソースとしてGitHubで公開したと発表した。服の流行が変化してもAIの認識精度を高く保つための研究への活用を見込む。 公開したデータは、服のコーディネートを試せるアプリ「IQON」で2010～2020年に投稿されたコーディネート情報や、投稿日時、「いいね」の数、ジャンルやカテゴリー情報、機械学習用に付与したラベルなど。 同社によると、ファッション関連のデータは流行の変化や新製品の登場によってデータの分布が変わる「分布シフト」という現象が起き、AIによる認識精度が低下する。分布シフトはファッション以外の分野でも起きるが、これまでデータセットの不足で研究が進まなかったという。 Shift15Mと合わせて、10年間のコーディネートの傾向を基に分布シフトの再現

ニュース ZOZO・アルティーリ千葉・千葉大学の三者で、ZOZOSUIT 2を活用した共同取り組みを開始 ～ スポーツ分野におけるZOZOSUIT 2活用の可能性追求と、三者がともに拠点を置く地元千葉への地域貢献を目指す ～ ファッション通販サイト「ZOZOTOWN」を運営する株式会社ZOZO（本社：千葉県千葉市 代表取締役社長兼CEO：澤田 宏太郎）、プロバスケットボールクラブ「アルティーリ千葉」を運営する株式会社アルティーリ（本社：千葉県千葉市 代表：新居 佳英）、国立大学法人千葉大学（所在地：千葉県千葉市 学長：中山 俊憲）の三者は、ZOZOが独自開発した計測テクノロジー「ZOZOSUIT 2」を活用した共同取り組みを開始することを発表いたします。本取り組みを通じ、スポーツ分野におけるZOZOSUIT 2活用の可能性を探るとともに、三者がともに拠点を置く地元千葉への地域貢献を目指して

PHOTO：KOHEI KANNO PHOTO：KOHEI KANNO PHOTO：KOHEI KANNO PHOTO：KOHEI KANNO PHOTO：KOHEI KANNO ファッション通販サイト「ゾゾタウン（ZOZOTOWN）」は、本格的にコスメ市場に参入する。独自に開発した肌色計測ツール「ゾゾグラス（ZOZOGLASS）」を無料配布し、ユーザーが自分の肌にマッチしたファンデーションをリコメンドし、購入を促す。3月18日から、新サービス「ゾゾコスメ（ZOZOCOSME）」をスタートし、ドラッグストア・バラエティーショップや百貨店で取り扱うコスメブランドを約500扱い、スキンケアからカラーメイクまで販売する。伊藤正裕ZOZO取締役兼COOは、「肌色の計測は技術的に最も難易度が高いが、ユーザーがコスメを購入する際のベースになるもの。今後はこの技術をヘアやリップなど周辺アイテムにも応用し

ニュース 【調査リリース】令和はワントーンコーデが増加。平成の定番「秋冬＝ダークカラー」はもう終わり？気分の上がるペールトーンが新常識！ ～ ファッションコーディネートアプリ「WEAR」のデータから解析した流行カラーの変化 〜 ZOZOグループが運営するファッションコーディネートアプリ「WEAR（ウェア）」は、ZOZO研究所福岡の画像解析技術を活用し、平成と令和の秋に着用されたカラーの変化について調査を実施しましたのでお知らせします。 本調査は、平成（2017年と2018年の各9月1日から10月31日）と令和（2019年と2020年の各9月1日から10月31日）を比較し、累計13,275名が投稿した計194,917件の女性のコーディネート画像を対象に実施しました。 平成に比べ、令和はワントーンコーデが増加 WEARに投稿されたコーディネート画像から、背景などを除いたファッションアイテム部分

ZOZOは10月29日、3D計測用ボディースーツ「ZOZOSUIT 2」を発表した。採寸に使う目印（マーカー）を旧ZOZOSUITの約50倍に増やし、デザインもカメラで認識しやすいものに変更。計測アルゴリズムも改善し、より精密な3Dモデルが作れるようになったという。同日から新規ビジネス創出に向け、パートナー企業を募集する。 ZOZOSUIT 2は着用者をスマートフォンで撮影して体形を計測し、3Dデータ化するためのボディースーツ。旧ZOZOSUITのマーカーは約400個だったが、ZOZOSUIT 2では約2万個に増やした。マーカーのデザインは、スマートフォンのカメラで捉えやすいよう2mmのドットを使ったものから6mmのドットに変更。撮影中の体の動きを補正する技術を導入するなど測定アルゴリズムも改善し、測定時の誤差は平均3.7mmと精度を向上させた。旧ZOZOSUITの誤差は非公開。 測定精度

ニュース ファッションコーディネートアプリ「WEAR」調査第2弾 直近6年間の投稿データから、洋服の「丈」に関する流行の変化を明らかに ～ トップスは2極化、ボトムスは長めへと変化 〜 ZOZOグループが運営するファッションコーディネートアプリ「WEAR（ウェア）」は、ZOZO研究所福岡の画像解析技術を活用し、直近6年間ユーザー投稿データを比較、ならびに女性ファッションの「丈」に関する流行の変化について調査を実施しましたので、お知らせします。 本調査は、2015年から2020年の各年6月1日から7月29日の期間において、登録性別が「女性」であるユーザー累計4,900名が投稿した、計34,250件のコーディネート画像を対象に実施いたしました。 今回調査研究を担ったZOZO研究所は、「ファッションを数値化する」をミッションに掲げる研究機関です。ZOZOグループが保有するファッションに関する膨大

ニュース ZOZO研究所、ZOZOTOWNのファッション推薦データとアルゴリズム研究開発基盤をオープンソースで公開 ZOZOグループの研究開発組織「ZOZO研究所」は、大規模ファッション推薦データと研究基盤となる「Open Bandit（※1）Data & Pipeline」をオープンソースとして公開しました。 現在、米中の少数の大企業によるデータと技術の占有により、外部の企業や技術者が同じ土俵で技術進歩に貢献することが難しいという懸念が強まっています。（※2） この問題に歯止めをかけ、日本企業からの積極的な技術貢献を目指すべく、ZOZOグループが保有する大規模データおよびソフトウェアパイプラインを公開する運びとなりました。今後、日本発のデータ技術のオープンイノベーションを促進するきっかけとなることを目指しています。 Open Bandit Dataは、ZOZOTOWN上での実際の推薦アル

男性用ジャケットで73サイズ、パンツで128サイズに対応する オンワードホールディングス（HD）は、ファッションEC（インターネット通販）サイト「ZOZOTOWN（ゾゾタウン）」を運営するZOZOとジャケットとパンツのオーダーメイド販売で協業する。ZOZOが持つ体形データを生かして、購入者にぴったりのサイズの商品を手軽にオーダーメイドできるようにする。8月下旬から販売を開始し、5年後には100億円の売り上げを目指す。 ZOZOは全身採寸用の「ZOZOSUIT（ゾゾスーツ）」から得た100万件以上の体形データを蓄積しており、ZOZOTOWNでは身長と体重を選択するだけで衣料品のサイズを推奨するサービス「マルチサイズ」を展開している。購入者は表示される多数のサイズの中から自分の好みなどに応じて商品を選ぶ。 オンワードHDは、ZOZOのマルチサイズサービスを使ってオーダーメイドブランド「KASH

こんにちは、基幹システム部BASEチームの横山です。 突然ですが、ちょうど1年程前に行われたZOZOバイト革命は覚えていますでしょうか？物流倉庫「ZOZOBASE」で一緒に働いてくれる仲間の2000人募集や、基本時給のUP等で少しだけ話題になりましたね。 今回は、そんなZOZOBASEの人材を管理する上で一助となる作業実績の集計自動化について紹介します。 はじめに ZOZOTOWNは独自の物流倉庫を保有しており、ブランド様からの商品入荷や保管、お客様への発送まで独自のシステムを用いて行っています。 一口に入荷から発送までと書きましたが、その中には多種多様な作業があり、現場で働く多くの方々に支えられております。このような物流倉庫の戦略を考える上で実績管理や人材管理はとても重要になります。 そんな実績の集計ですが、少し前までは人手で行われていました。それを自動化する際、どのような要件で設計・開

ニュース 「ZOZOMAT」の計測者数、100万人を突破！ 足の3D計測データから分析した、 日本全国の「平均足型」と「足の平均サイズ」を初公開！ ～ 靴の専門モール「ZOZOSHOES」のオープンから約3か月、ユーザーからは「かなりのフィット感」「履き心地良すぎ」など驚きのコメントも ～ ファッション通販サイト 「ZOZOTOWN」を運営する株式会社ZOZO（本社：千葉県千葉市　代表取締役社長兼CEO：澤田 宏太郎）は、スマホで簡単に足の3Dサイズを計測できる「ZOZOMAT」の計測者数が、100万人を突破いたしました。これを機に、足の3D計測データから分析した日本全国の「平均足型」と「足の平均サイズ」を初公開いたします。また、実際に計測を経験したユーザーから多数寄せられた驚きのコメントもあわせてご紹介します。 「ZOZOMAT」は2月27日から順次発送を開始し、わずか3か月で計測者数が

〜 72万件におよぶユーザー投稿データから読み解く、人気急上昇カラーとは ～ ZOZOグループが運営するファッションコーディネートアプリ「WEAR（ウェア）」は、ZOZO研究所 福岡の画像解析技術を活用し、「WEAR」の72万件におよぶユーザー投稿データから2020年春夏の着用カラー分析を実施しましたので、お知らせします。 本調査は、2020年2月1日～4月21日の期間において、登録性別が「女性」であるユーザー累計7,003名が投稿した計721,093件を対象に実施いたしました。 今回調査研究を担ったZOZO研究所は「ファッションを数値化する」をミッションに掲げる研究機関です。ZOZOグループが保有するファッションに関する膨大な情報資産を基に、ファッションを科学的に解明するための研究開発を行っています。 2020年春服はグリーンの着用率が急上昇 「WEAR」に投稿されたコーディネート画像に

株式会社ZOZO(本社：千葉県千葉市　代表取締役社長：前澤 友作)が運営するファッション通販サイト 「ZOZOTOWN」(https://zozo.jp/)は、AIを活用し、各商品画面からユーザーが閲覧する商品と似ている商品を検索できる、「類似アイテム検索機能」の提供を本日8月26日(月)より開始いたしました。 今回の「類似アイテム検索機能」の開発は、ZOZOTOWNやWEARなどZOZOグループが運営するサービスの技術開発を担う、株式会社ZOZOテクノロジーズ(本社：東京都渋谷区 代表取締役社長：久保田竜弥、代表取締役CINO：金山裕樹)がおこないました。各商品画面上にある「画像検索アイコン」をタップするだけで、閲覧中の商品の形・質感・色・柄などをもとにAIが似ている商品を検出し、一覧で表示します。1つの商品を起点として、「これと似た色の服をチェックしたい」「こんな柄の服がほしい」などの

2019年5月23日、DMM.comとZOZOテクノロジーズによる合同勉強会「DMM x ZOZOを支える基盤技術」が開催されました。数多くのサービスを展開している2つの巨大プラットフォームは、どのようなインフラ基盤・運用によって支えられているのか？　2社で活躍するエンジニアたちが、その舞台裏を明かします。プレゼンテーション「ZOZOSUITによる計測システムの裏側について」に登壇したのは、株式会社ZOZOテクノロジーズ の指原卓也氏。講演資料はこちら ZOZOSUITを用いた計測システムの裏側 指原卓也氏（以下、指原）：こんばんは。僕からは「ZOZOSUIT計測システムの裏側について」をお話させていただきます。 最初に簡単な自己紹介です。 ZOZOテクノロジーズでSREチームのリーダーやっている指原と申します。2011年に入社し、ファッション通販サイト「ZOZOTOWN」の開発に2年ほど