Azure

Azure Video Indexer でおすすめの服を表示する

はじめに

Azure Video Indexer でおすすめの服を表示してくる機能が付いたようです。

Private Preview: Featured Clothing | Azure updates | Microsoft Azure
Private Preview: Featured Clothing | Azure updates | Microsoft Azure

This insight provides information on key items worn by individuals within a video and the timestamp ...

azure.microsoft.com

「おすすめの服」のインサイトを使用すると、動画内で個人が着用している主要なアイテムを特定できます。これにより、関連する衣料品の広告を、それらが表示されたビデオ内の特定の時間と一致させることで、高品質のビデオ内コンテキスト広告が可能になります。Azure Video Indexer の高度なプリセットを使用して、"おすすめの服" を利用できるようになりました。新しい注目の衣料品のインサイト情報を使用すると、よりターゲットを絞った広告の配置を有効にすることができます。

衣料品にターゲットを絞った広告を行うための機能です。

プレビュー機能のため今後変更などが行われることがあります。

おすすめの服

基本的には一致した人物を確認する場合と同様の設定です。

Enable featured clothing of an observed person | Microsoft Learn
Enable featured clothing of an observed person | Microsoft Learn

When indexing a video using Azure AI Video Indexer advanced video settings, you can view the feature ...

learn.microsoft.com

ブラウザ上では確認がすることができません。

右上から成果物（ZIP）をダウンロードします。

ダウンロードしたファイルを解凍すると featuredclothing.zip があります。

これを解凍すると featuredclothing.map.json があります。これにおすすめの服の情報があります。

  "instances": [
    {
      "confidence": 0.59,
      "faceBoundingBox": {
        "x": 0.61953,
        "y": 0.00277,
        "width": 0.05937,
        "height": 0.13333
      },
      "fileName": "frame_4012.jpg",
      "frameIndex": 4012,
      "id": 1,
      "opBoundingBox": {
        "x": 0.61875,
        "y": 0.025,
        "width": 0.09271,
        "height": 0.4713
      },
      "timestamp": "00:02:13.8670670"
    },
    {
      "confidence": 0.58,
      "faceBoundingBox": {},
      "fileName": "frame_2571.jpg",
      "frameIndex": 2571,
      "id": 2,
      "opBoundingBox": {
        "x": 0.48021,
        "y": 0.20926,
        "width": 0.18906,
        "height": 0.74444
      },
      "timestamp": "00:01:25.7857000"
    },

ここでidはランキングになります。1は1位のことを指します。

また featuredclothing.frames.map.zip には最高の服のシーンが画像キャプチャとして保存されます。いまいちなシーンもあります。

上記でid:1（ランキング1位）の服を確認します。どれだ？

"fileName": "frame_4012.jpg",

さて、これらはスコア化されているのですが、有名人だとスコアが高くなるようです。

When AI meets fashion: Azure Video Indexer’s new model for detecting Featured Clothing in videos – TheWindowsUpdate.com
When AI meets fashion: Azure Video Indexer’s new model for detecting Featured Clothing in videos – TheWindowsUpdate.com

What happens when a Data Scientist combines complex neural networks with classic ML (machine learnin ...

thewindowsupdate.com

今後はブラウザでも確認可能になると思います。

まとめ

Azure Video Indexer の機能のひとつを紹介しました。これらは動画を使ったターゲット広告を行う場合に利用できる機能です。そっち系の人には自分で開発行う必要がなく便利な機能ではないでしょうか。

-Azure
-