Download as PDF, PPTX
![#aws_serverless
Amazon Rekognition API: DetectFaces
✤ 顔分析
⎻ 顔および特徴の検出
[
{
"BoundingBox": {
"Height": 0.3449999988079071,
"Left": 0.09666666388511658,
"Top": 0.27166667580604553,
"Width": 0.23000000417232513
},
"Confidence": 100,
"Emotions": [
{"Confidence": 99.1335220336914,
"Type": "HAPPY" },
{"Confidence": 3.3275485038757324,
"Type": "CALM"},
{"Confidence": 0.31517744064331055,
"Type": "SAD"}
],
"Eyeglasses": {"Confidence": 99.8050537109375,
"Value": false},
"EyesOpen": {Confidence": 99.99979400634766,
"Value": true},
"Gender": {"Confidence": 100,
"Value": "Female”}
DetectFaces](https://image.slidesharecdn.com/20161207introducingrekognitionpollylex-161208062132/75/Introducing-Amazon-Rekognition-Amazon-Polly-and-Amazon-Lex-9-2048.jpg)
![#aws_serverless
Amazon Rekognition API: CompareFaces
✤ 顔の⽐較
CompareFaces
{
"FaceMatches": [
{"Face": {"BoundingBox": {
"Height": 0.2683333456516266,
"Left": 0.5099999904632568,
"Top": 0.1783333271741867,
"Width": 0.17888888716697693},
"Confidence": 99.99845123291016},
"Similarity": 96
},
{"Face": {"BoundingBox": {
"Height": 0.2383333295583725,
"Left": 0.6233333349227905,
"Top": 0.3016666769981384,
"Width": 0.15888889133930206},
"Confidence": 99.71249389648438},
"Similarity": 0
}
],
"SourceImageFace": {"BoundingBox": {
"Height": 0.23983436822891235,
"Left": 0.28333333134651184,
"Top": 0.351423978805542,
"Width": 0.1599999964237213},
"Confidence": 99.99344635009766}
}](https://image.slidesharecdn.com/20161207introducingrekognitionpollylex-161208062132/75/Introducing-Amazon-Rekognition-Amazon-Polly-and-Amazon-Lex-12-2048.jpg)
![#aws_serverless
実装例（Python）
from boto3 import Session
from contextlib import closing
polly = Session().client("polly")
response = polly.synthesize_speech(
Text="Hello world!",
OutputFormat="mp3",
VoiceId="Joanna")
with closing(response["AudioStream"]) as stream:
with open("speech.mp3", "wb") as file:
file.write(stream.read())](https://image.slidesharecdn.com/20161207introducingrekognitionpollylex-161208062132/75/Introducing-Amazon-Rekognition-Amazon-Polly-and-Amazon-Lex-27-2048.jpg)
Uploaded byKeisuke Nishitani
Introducing Amazon Rekognition, Amazon Polly and Amazon Lex
2016年12月7日のServerless Follow Upでの資料です。
Introducing Amazon Rekognition, Amazon Polly and Amazon Lex
- 1. #aws_serverless Introducing Amazon Rekognition, AmazonPolly and Amazon Lex Keisuke Nishitani (@Keisuke69) Amazon Web Services Japan K.K. Dec 07, 2016
- 2. #aws_serverless Profile Keisuke Nishitani Specialist SolutionsArchitect, Amazon Web Service Japan K.K @Keisuke69 Keisuke69 ✤ Specialist SA - Serverless - Mobile - DevOps - Application Service ✤ ソーシャルで⾚ドクロの⼈です ✤ RESTおじさん ✤ 餃⼦の王将エヴァンジェリスト（⾃称） ✤ ⾳楽が好きです、フジロッカーです、今年も⾏きました ✤ ブログ: http://keisuke69.hatenablog.jp/ Keisuke69 Keisuke69Keisuke69x
- 3.
- 4.
- 5. #aws_serverless Amazon Rekognition ディープラーニングをベースとした画像認識サービス 数百万の画像を検索、検証、整理 物体およびシーン検知 顔の分析顔の⽐較 顔認識 DetectLabels DetectFaces CompareFaces IndexFaces SearchFaceByImage
- 6. #aws_serverless Amazon Rekognition API:DetectLables ✤ 物体とシーンの検知 ⎻ イメージ内の物体やシーンおよびコンセプト を検知 DetectLabels { "Confidence": 94.62968444824219, "Name": "adventure" }, { "Confidence": 94.62968444824219, "Name": "boat" }, { "Confidence": 94.62968444824219, "Name": "rafting" }, . . .
- 7.
- 8.
- 9. #aws_serverless Amazon Rekognition API:DetectFaces ✤ 顔分析 ⎻ 顔および特徴の検出 [ { "BoundingBox": { "Height": 0.3449999988079071, "Left": 0.09666666388511658, "Top": 0.27166667580604553, "Width": 0.23000000417232513 }, "Confidence": 100, "Emotions": [ {"Confidence": 99.1335220336914, "Type": "HAPPY" }, {"Confidence": 3.3275485038757324, "Type": "CALM"}, {"Confidence": 0.31517744064331055, "Type": "SAD"} ], "Eyeglasses": {"Confidence": 99.8050537109375, "Value": false}, "EyesOpen": {Confidence": 99.99979400634766, "Value": true}, "Gender": {"Confidence": 100, "Value": "Female”} DetectFaces
- 10.
- 11.
- 12. #aws_serverless Amazon Rekognition API:CompareFaces ✤ 顔の⽐較 CompareFaces { "FaceMatches": [ {"Face": {"BoundingBox": { "Height": 0.2683333456516266, "Left": 0.5099999904632568, "Top": 0.1783333271741867, "Width": 0.17888888716697693}, "Confidence": 99.99845123291016}, "Similarity": 96 }, {"Face": {"BoundingBox": { "Height": 0.2383333295583725, "Left": 0.6233333349227905, "Top": 0.3016666769981384, "Width": 0.15888889133930206}, "Confidence": 99.71249389648438}, "Similarity": 0 } ], "SourceImageFace": {"BoundingBox": { "Height": 0.23983436822891235, "Left": 0.28333333134651184, "Top": 0.351423978805542, "Width": 0.1599999964237213}, "Confidence": 99.99344635009766} }
- 13.
- 14.
- 15.
- 16.
- 17. #aws_serverless ユースケース ✤ 旅⾏サイトやフォーラムでは、ビーチ、キャンプ、⼭などのラベルでユーザーが作成し た画像を分類 ✤ 写真印刷サービスでベストな写真をリコメンド ✤⼩売店舗で、店内の顧客がどういった層であるかや感情を認識 ✤ アドテクサービスでは顧客に動的にパーソナライズしたコンテンツを表⽰ ✤ 家族写真共有アプリは、家族内の同じ⼈物のすべての顔をグループ化 ✤ キャンパス/職場では顔検索を使⽤して、施設内の⼈が⽴ち⼊りを許可された⼈かどうか を確認
- 18.
- 19. #aws_serverless Pricing ✤ 無料枠：5000 imagesper month for first 12 months Image Analysis Tiers Price per 1000 images processed First 1 million images processed* per month $1.00 Next 9 million images processed* per month $0.80 Next 90 million images processed* per month $0.60 Over 100 million images processed* per month $0.40 *Images processed: For APIs with image as input, it’s the number of images analyzed. For APIs with no image input 1 API call = 1 image processed.
- 20.
- 21. #aws_serverless Amazon Pollyが⽣まれた背景 ✤ エンドユーザとのコミュニケーション⽤途で⾳声を使⽤するアプリが より増えつつある ✤⽣成された⾳声が⾃然であるということは、ユーザエクスペリエンス の観点で重要 ✤ ⾳声のインテグレーションはユースケースによって異なる
- 22. #aws_serverless Amazon Pollyとは ✤ Textto Speech as a Service ⎻ テキストをリアルな⾳声に変換するサービス ✤ 24⾔語で47の本物のような声を提供 ✤ リアルタイムシステムの開発を可能にする低レイテンシなレスポンス ✤ ⽣成された⾳声を保存、再⽣、配信可能
- 23. #aws_serverless Amazon Polly: 対応⾔語 Americas: •Brazilian Portuguese • Canadian French • English (US) • Spanish (US) A-PAC: • Australian English • Indian English • Japanese EMEA: • British English • Danish • Dutch • French • German • Icelandic • Italian • Norwegian • Polish • Portuguese • Romanian • Russian • Spanish • Swedish • Turkish • Welsh • Welsh English
- 24. #aws_serverless Amazon Polly: SSML ✤⾳声合成マークアップ⾔語（Speech Synthesis Markup Language） ⎻ W3C推奨の⾳声合成アプリ向けのXMLベースのマークアップ⾔語 <speak> My name is Kuklinski. It is spelled <prosody rate='x-slow'> <say-as interpret-as="characters">Kuklinski</say-as> </prosody> </speak>
- 25. #aws_serverless Amazon Polly: Lexicons ✤単語やフレーズの発⾳をカスタマイズ可能 ✤ My daughter’s name is Kaja. <lexeme> <grapheme>Kaja</grapheme> <grapheme>kaja</grapheme> <grapheme>KAJA</grapheme> <phoneme>"kaI.@</phoneme> </lexeme>
- 26. #aws_serverless TEXT Market grew by > 20%. WORDSPHONEMES { { { { { ˈtwɛn.ti pɚ.ˈsɛnt ˈmɑɹ.kət ˈgɹu baɪˈmoʊɹ ˈðæn PROSODY CONTOURUNIT SELECTION AND ADAPTATION TEXT PROCESSING PROSODY MODIFICATIONSTREAMING Market grew by more than twenty percent Speech units inventory
- 27. #aws_serverless 実装例（Python） from boto3 importSession from contextlib import closing polly = Session().client("polly") response = polly.synthesize_speech( Text="Hello world!", OutputFormat="mp3", VoiceId="Joanna") with closing(response["AudioStream"]) as stream: with open("speech.mp3", "wb") as file: file.write(stream.read())
- 28. #aws_serverless Pricing ✤ 従量課⾦ ✤ 100万⽂字あたり$4 ✤⽉あたり500万⽂字まで無料（最初の⼀年間） ✤ ⽣成された⾳声は保存して再⽣可能
- 29.
- 30.
- 31. #aws_serverless 会話による相互作⽤の出現 1st Gen: Punch Cards & Memory Registers 2nd Gen: Pointers & Sliders 3ndGen: Conversational Interfaces
- 32.
- 33.
- 34. #aws_serverless Amazon Lex -特徴 Alexaと同じ技術を⽤いた、テキストと⾳声⾔語の理解 エンタープライズシステムに接続する、エンタープライズSaaSコネクタ チャットサービスへのデプロイ 会話を構築するための効率的で直感的なツール、⾃動でスケール バージョニングとエイリアスのサポート
- 35.
- 36.
- 37.
- 38. #aws_serverless バージョニングとエイリアスのサポート AliasVersioning v1 v2 v3latest • インテント、スロット、ボットでサポート • 複数の開発者による環境をサポート • 以前のバージョンへロールバック v1 Dev v2 Stage v3 Prod • 異なるプラットフォームへ異なるエイリアスをデプロイ • 開発、ステージング、本番環境で異なるスタックを実⾏ • 異なるエイリアスで異なるユーザグループをターゲット
- 39.
- 40.
- 41. #aws_serverless Amazon Lex –Use Cases Informational Bots ⽇々消費者のリクエストに答えるチャットボット Application Bots モバイルアプリにパワフルなインターフェースを構築 • 新着ニュース • 天気 • スポーツのスコア…. • チケット予約 • フードの注⽂ • 銀⾏⼝座の管理 …. Enterprise Productivity Bots 企業の業務を合理化し、効率を向上 • セールス番号の確認 • マーケティングのパフォー マンス • 在庫状況…. Internet of Things (IoT) Bots デバイスとのやり取りで会話型インターフェースを利⽤可能に • ウェアラブル • アプライアンス • ⾞….
- 42. #aws_serverless Amazon Lex -メリット ⾼品質なテキストと⾳声⾔語理解 AWSプラットフォームとのインテグレーション シームレスなデプロイとスケール 簡単に使える 費⽤対効果が⾼い
- 43.
- 44.
- 45. #aws_serverless “Book a Hotel” BookHotel NYC “Book a Hotel in NYC” ⾃動的に⾳声認識 Hotel Booking New York City ⾃然⾔語理解 Intent/Slot モデル UtterancesHotel Booking City New York City Check In Nov 30th Check Out Dec 2nd “Your hotel is booked for Nov 30th” Polly 確認: “Your hotel is booked for Nov 30th” a in “Can I go ahead with the booking?
- 46. #aws_serverless Save, Build andPublish Save Build ボットを保存することで サーバ上に現在の状態が保 存される ボットをビルドする ことでテスト可能な バージョンを作成 Publish ボットをパブリッシュして、ボット のバージョンとエイリアスを作成 Test コンソール上の チャットウィンドウ でボットをテスト
- 47.
- 48. #aws_serverless Pricing Text Speech Price per 1000 requests $0.75$4.00 Free Tier* (requests per month) 10,000 5,000 *Available for the first year upon sign-up to new Amazon Lex customers
- 49.