【Google Cloud Day'21】「Cloud AutoML と Edge TPU を用いて競輪ライブ映像の自動編集を実現した事例」を視聴して

オンプレでの分析にしているが、より高機能を求めるとGMECみたいなのが求められてくるのではないかと思う

https://cloudonair.withgoogle.com/events/google-cloud-day-digital-21/watch?talk=d2-ml-04	
Cloud AutoML と Edge TPU を用いて競輪ライブ映像の自動編集を実現した事例	
概要：『TIPSTAR』とは、多彩なタレント達の予想トークと共に、競輪のライブ映像を観戦しながら、仲間とワイワイ競輪のネット投票を、毎⽇楽しむことができるスポーツベッティングサービスです。本セッションでは、競輪ライブ映像の編集作業を人間ではなく、AI による自動化を実施し、レースにあわせてテロップや BGM が流れる仕組みを、Cloud AutoML と Edge TPU を用いて、実現したお話をします。	

<table>
	<tr>
		<th>質問</th>
		<th>返答</th>
	</tr>
	<tr>
		<th>音声を画像にして学習ということに驚きましたが、音声のままで学習することはこの場合難しかったのでしょうか</th>
		<td>あとで開発時間が短かった話が出てくるのですが、画像モデルと同じラインを使いまわしたかったので、音声を画像化しました！完全に時短ですね。精度も悪くなかったので、画像化したままです。</td>
	</tr>
</table>

#関連情報	
https://www.amazon.co.jp/Google-Coral-Accelerator-Edge-%E3%82%A2%E3%82%AF%E3%82%BB%E3%83%A9%E3%83%AC%E3%83%BC%E3%82%BF/dp/B07S214S5Y/ref=sr_1_5?adgrpid=114660875454&dchild=1&hvadid=492580482143&hvdev=c&hvqmt=e&hvtargid=kwd-850742797620&hydadcr=9520_10352990&jp-ad-ap=0&keywords=google+coral+edge+tpu&qid=1624257437&sr=8-5
	https://coral.ai/docs/edgetpu/models-intro/
	https://cloud.watch.impress.co.jp/docs/news/1134852.html

#内容
<table>
	<tr>
		<th>切り口</th>
		<th>内容</th>
	</tr>
	<tr>
		<th>話の内容</th>
		<td>新規事業開発。新規事業に出てきた際の課題。その解決方法</td>
	</tr>
	<tr>
		<th>TIPSTARとは</th>
		<td></td>
	</tr>
	<tr>
		<th>課題</th>
		<td>ライブなので、ミスができない</td>
	</tr>
	<tr>
		<th>解決方法</th>
		<td></td>
	</tr>
	<tr>
		<th>システム構成</th>
		<td>競輪場からデータをもらう流れ。テレビ戦からエンコーダーをかませてデータをもらう。HLS変換して映像を配信する。</td>
	</tr>
	<tr>
		<th>編集者の編集箇所</th>
		<td>太字の部分は編集作業をしている箇所</td>
	</tr>
	<tr>
		<th>編集箇所</th>
		<td>下線部を編集する</td>
	</tr>
	<tr>
		<th>開発アプローチ</th>
		<td>推論からapiをたたくまでに2秒かかるなら、映像も2秒遅らせるという感じで調整しながら進める｡43会場ごとにカメラの設置などが違うので精度が出なかった。そのため、各会場に合わせたシステムを作った。学習はAutoMLVisionをつかった。</td>
	</tr>
	<tr>
		<th>学習モデルを活用するまで</th>
		<td>学習させるには時間がない。AutoMLVisionをつかった　一晩でモデルが完成した　。作ったモデルをエクスポートできたことと、オンプレ環境での分析も検討していたので、EdgeTPUを用いた</td>
	</tr>
	<tr>
		<th>EDGE　TPUとは</th>
		<td></td>
	</tr>
	<tr>
		<th>結果</th>
		<td></td>
	</tr>
	<tr>
		<th>今後</th>
		<td>ハイスペックのEdge　TPUに切り替え予定</td>
	</tr>
</table>

![1.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/447ba44d-1a81-41e6-7137-7caa85ecd596.png)
![2.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/45504d26-1a38-d567-d643-e4984386de62.png)
![3.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/6d4bd39a-ed58-df05-49c4-a8d95ca1a1f6.png)
![4.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/386f3937-cc84-42d5-8e8c-abefb69636f2.png)
![5.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/5606721b-c31d-7177-a852-62ec0f66954a.png)
![6.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/a682b9b6-7db8-5de2-46e4-c4d973c39bc6.png)
![7.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/e889b09f-ef27-5918-1d22-70fa4991ce49.png)
![8.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/5b662989-b689-53bd-9b48-8c22746735c9.png)
![9.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/3bf60c84-ecd0-45bd-2762-24fc820196f0.png)
![10.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/5a28c243-9b2f-e37b-4012-18ada0f37ff2.png)
![11.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/dab3b3d3-91d1-77b5-82f9-283da0ebd94f.png)
![12.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/463ebf22-9172-64b9-bdee-b935d3316619.png)
![13.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/14d6765b-0cd8-ce66-96d1-42374cd3c2f0.png)
![14.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/f568f754-781a-6e4f-6e86-1604ce711afb.png)
![15.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/4248c1c7-42b8-fff5-339b-f64c7ccda52a.png)
![16.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/b00ad71d-c55e-9de4-c48c-a7f573752f40.png)
![17.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/966cb47c-f8bd-bc98-a73b-dcbe37c29764.png)
![18.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/556084/8367b945-c199-0aca-6265-66ec4c7c6296.png)