図1 ネイルレシピ検索システム概要ントを取得することによってユーザの持っている服に似合うコーディネートを検索するシステムを構築することを目的としている [7] 本研究ではネイルレシピを対象としており場所に対応しているかだけでなくユーザの好みや腕も考慮している津田らは爪の反射率の

Size: px

Start display at page:

Download "図1 ネイルレシピ検索システム概要ントを取得することによってユーザの持っている服に似合うコーディネートを検索するシステムを構築することを目的としている [7] 本研究ではネイルレシピを対象としており場所に対応しているかだけでなくユーザの好みや腕も考慮している津田らは爪の反射率の"

れんかみやのじょう
5 years ago
Views:

1 DEIM Forum 2017 P Mayumi Web Web ,223 [1] ,450 Web Web 2. Cookpad [2] [3] [4] rednails [5] 2009 [6] 4 Web 1 4 Web

図1 ネイルレシピ検索システム概要ントを取得することによってユーザの持っている服に似合うコーディネートを検索するシステムを構築することを目的としている [7] 本研究ではネイルレシピを対象としており場所に対応しているかだけでなくユーザの好みや腕も考慮している津田らは爪の反射率の違いと指の対称性に注目し光源の位置を推定することなく照明による気変化を軽減させる爪領域

はないかと考えている高田らは手動でメタデータを付与した料理レシピのテキストとの類似度を用いることにより未知の料理レシピに対して気分に対応するメタデータを自動的に付与する手法を提案している [9] 単一特徴ベクトルを用いたメタデータ自動付与方式に関して複数のシナリオを用いた評価実験を行なったところシナリオに差はあるが手動でメタデータを付与したものに近い実現している食材名は

2 図1 ネイルレシピ検索システム概要ントを取得することによってユーザの持っている服に似合うコーディネートを検索するシステムを構築することを目的としている [7] 本研究ではネイルレシピを対象としており場所に対応しているかだけでなくユーザの好みや腕も考慮している津田らは爪の反射率の違いと指の対称性に注目し光源の位置を推定することなく照明による気変化を軽減させる爪領域抽出法を提案している [8] この研究の目的は身近な携帯端末図 2 ネイルレシピの例での利用を想定した 3D ネイル重畳シミレーションシステムを構築することであり本研究では完成図だけでなくネイルのレシピを検索するシステムの構築するしかし本研究は完成図から爪範囲を手動で選択しなければならないそこでこの爪領域抽出法を使用することで課題を克服することができるのではないかと考えている高田らは手動でメタデータを付与した料理レシピのテキストとの類似度を用いることにより未知の料理レシピに対して気分に対応するメタデータを自動的に付与する手法を提案している [9] 単一特徴ベクトルを用いたメタデータ自動付与方式に関して複数のシナリオを用いた評価実験を行なったところシナリオに差はあるが手動でメタデータを付与したものに近い実現している食材名は本研究における機材に相当するがこの方法では毎回ユーザが手動で情報を登録しなければならず手間がかかってしまうため本研究ではレシピに使用されている機材の数をユーザが選択することによって検索する上述の通りネイルおよびその他のアイテムに対するレシピ分析を行う研究が数多く行われているが本研究にて実施しているテキスト及び画像の分析を用いるネイルレシピの検索は行われていない 3. ユーザの気分と状況を考慮したネイルレシピ検索方式精度を得ることができていた本研究はネイルレシピを対象としテキストだけでなく画像を分析することで更に高い精度でレシピを検索することを目指す本節では提案手法であるユーザの気分と状況を考慮したネイルレシピ検索方式に関して説明する提案手法の概要 3. 1 三野らはユーザのスケジュールに合わせてカロリーを節を述べると共にネイルレシピへのメタデータ付与 3. 2 減らすダイエットのためのレシピ検索システムを提案してい節およびシステム構築に向けた検討 3. 3 節について述る [10] この研究は最終的に決められた日にちまでに目標体べる重に達すれば途中経過は考慮されないが本研究では一回一 3. 1 提案手法の概要回の検索でユーザを満足させなければならない Web 上に公開されている人手でラベリングしたネイルレシピ赤澤らは冷蔵庫にある食材の分量や賞味期限を考慮した結果レシピランキング手法を提案しレシピの探しやすさを考慮した 2 段階に別れた検索結果を提示するシステムを実装した [11] 被験者実験を行うことにより提案システムの基本的な有用性を確認することができたこの研究では食材に ID 食材名食材分量賞味期限の４つ情報を取得することによりを学習データとし各レシピのテキスト及び画像から各特徴量を推定することが可能な分類器を構築する本研究では図 2 のように 1 ステップごとに画像とテキストによる解説を付与したネイルレシピを想定しているこの分類器を用いて Web 上から収集したテキスト及び画像付きのネイルレシピに対して雰囲気イベント道具難易度カラーの 5 つの項目に関す

3 図 3 システムの流れるメタデータを付与するメタデータを付与することにより入力されたネイル気分情報に対してユーザの気分に合った図 1 のようなスライドバーをユーザが動かすことでユーザのネイルレシピを検索するには各ネイルレシピにメタデータを気分や状況を反映させることが可能なインスタラクティブなネ付与する必要があり各ネイルレシピにメタデータを付与するイルレシピ検索システムの開発を行うここで本研究におけにはメタデータを作成する必要があるそこでメタデータをるユーザの気分や状況とはスライドバーの各項目のことを示作成するためにネイルレシピ内のテキストおよびネイル完成している画像を分析することによってスライドバーの項目である雰提案するネイルレシピ検索システムの流れをデータベース作成モジュールと検索モジュールに分けて説明する (図 3) データベース作成処理 1 Web 上からネイルレシピを収集 2 ネイルレシピ内のネイル画像からは色情報を抽出しテキストからは特徴を抽出 3 抽出したデータを用いてメタデータを付与し DB に囲気イベント道具難易度の 4 つの気分項目更にカラーチャートについてのメタデータを作成する表 1 にレシピから抽出できると考えられるメタデータとして登録する各気分項目の分析手法の例を示す表1 メタデータとして登録する各項目の分析手法の例項目気分分析手法雰囲気キュートハートレースなどの格納レシピ検索処理 1 ユーザがスライドバーおよびカラーチャートを入力してネイルレシピを問い合わせるワードが使用されているイベント道具シックカラーの明度が低いオフィスカラーとパーツが少ないパーティカラーとパーツが多い少ない 2 (1) の入力値とレシピの類似度を分析 3 類似度の高い順にレシピを検索本研究ではネイルレシピを独自に作成することは行わない rednails [5] のようにネイルグッズの通販サイトが公開しているネイルレシピや個人ブロガーが公開しているネイルレシピから図 2 のような 1 ステップごとに画像およびテキストによ機材の数が基準を超えなかった場合多い機材の数が基準を超えた場合難易度簡単工程数が少ないシールが使用されている難しい工程数が多い細い筆が使用されているる解説を掲載したネイルレシピを収集する 3. 2 ネイルレシピへのメタデータ本節ではネイルレシピのメタデータ付与に関して述べる以下テキスト分析手法節を述べると共に画像分析手法節について述べる

3. 2. 1 テキスト分析手法ネイルレシピ中には雰囲気に関連する形や模様の情報イベントに関連する機材の種類や数の情報道具の名称難易度に関係する工程数など様々な情報が存在するこのことから SVM を用いてレシピを学習し気分項目雰囲気がキュートなのかシックなのか等の各気分項目の特徴ベクトルを作成するまた項目イベントや難易度においては細い筆や

4 テキスト分析手法ネイルレシピ中には雰囲気に関連する形や模様の情報イベントに関連する機材の種類や数の情報道具の名称難易度に関係する工程数など様々な情報が存在するこのことから SVM を用いてレシピを学習し気分項目雰囲気がキュートなのかシックなのか等の各気分項目の特徴ベクトルを作成するまた項目イベントや難易度においては細い筆やストーンなどの機材やパーツの種類や数により特徴を見つけられると考えられるこのことから機材パーツ辞書を作成することで項目イベントや難易度が判別可能になると考えるまたレシピの工程が多ければ多いほど難易度が高く少ないと難易度は高くないと考えられる従って項目難易度においてはレシピの工程数も考慮する必要がある工程数は動詞の数を用いることで判別できると考えられる画像分析手法本研究ではスライドバーで選択可能な気分項目の他にユーザがカラーチャートから色を選択することによって選択した色に近いネイルレシピを検索するシステムを提案している図 4 インスタラクティブな検索システム A 節で説明したテキスト分析のみでは複数の色が存在するため主要な色を特定することは困難であるしかしネイルレシピの完成図の画像分析を行えば主要な色を特定できると考える以下に提案する画像分析手法を示す 1 ネイルレシピのネイル完成画像を取得 2 (1) の画像からネイルアートを施している部分を手動で抜き出す 3 選択した範囲がどのような色合いになっているか分析 4 (3) で得た色をレシピのメタデータとして登録 3. 3 システム構築に向けた検討本研究はインタラクティブなネイル検索システムを目標とする図 4 に将来的に目指すネイルレシピ検索結果の例を示す左の検索結果はキュートでピンク色という条件でレシピを検索したものであるもし検索結果がイメージと異ればスライドバーを変更することで新たな検索結果が表示されるこのようにカラーチャートをピンクから紫に変更すると図 5 のような検索結果を得ることができるこのようなインタラクティブに検索可能なシステムがあればユーザが求めているものをより早く手に入れることができるプロトライプシステムの実装例提案するレシピ検索システムの実装に向けて以下の手順で図 5 インスタラクティブな検索システム B プロトタイプシステムの実装を行った 1 雰囲気イベント道具難易度色の異なる 3 つのネイルレシピを用意 2 各ネイルレシピに対して雰囲気イベント道具難易度色の全ての項目に手動でメタデータを付与 3 作成した検索システムに 3 つのネイルレシピとネイルレシピに対して項目別に手動で付与したメタデータを挿入 4 ユーザがスライドバーの項目を動かすことで個人に合った雰囲気イベント道具難易度色を選択 5 (4) で入力した結果がスライドバーで選択した条件に近いネイルレシピが順に検索されているとなっているかをユーザが評価 3 つの気分を入力しそれぞれの出力結果の一番初めに検索されたネイル画像の結果を図 6 に示す 1 回目の入力は道具が多い難しい青色という条件で検索した結果である 2 回目の入力はキュート黄色という条件で検索した結果である 3 回目の入力はキュート

29 1H2-52015. [8] PRMU 110(381) 59-64 2011-01-132011. [9] DBS2014-DBS- 160(13)1-72014. [10], 23 1A4-42009. [11],, 4 DEIM Forum 2012, E1-2, 2012. 6, 4.

5 29 1H [8] PRMU 110(381) [9] DBS2014-DBS- 160(13) [10], 23 1A [11],, 4 DEIM Forum 2012, E1-2, , 4. Web Web JSPS 16K [1] , report.html, ( ) [2] Cookpad [3] [4] [5] rednails [6], [7]

料理画像の色情報を用いたレシピ選別支援 DEIM Forum 2017 P8-3 平川芽依牛尼剛聡角谷和俊関西学院大学総合政策学部メディア情報学科兵庫県三田市学園 2-1 九州大学大学院芸術工学研究院福岡県福岡市南区塩原 {d

料理画像の色情報を用いたレシピ選別支援 DEIM Forum 2017 P8-3 平川芽依牛尼剛聡角谷和俊関西学院大学総合政策学部メディア情報学科 669-1337 兵庫県三田市学園 2-1 九州大学大学院芸術工学研究院 815-8540 福岡県福岡市南区塩原 4-9-1 E-mail: {drx25928,sumiya}@kwansei.ac.jp, ushiama@design.kyushu-u.ac.jp