昨日、GCPNEXT World Tour in Tokyoへ行ってきました。
お昼過ぎに到着し、展示会場に入ると助六弁当とお茶のセットがセルフサービスな感じで積まれていましたので、一つありがたくいただき、急ぎ気味で完食してから、展示製品・サービスを見て回りました。
会場中央付近では、インターネットで見たことがあった唐揚げサーバのデモが行なわれてました。
お皿を認識する映像と処理の様子がモニターに映されていました。
コーヒーとマカロンもいただきました。
午後一のセッションは、「Googleの機械学習技術で実現する賢いアプリケーション」を傍聴しました。
Mountain Viewで働くGoogleのプロダクトマネージャーの方にTensorflowのローカル実行と現在アルファ段階Google MLのクラウド実行のデモを見せていただきました。同じコマンドにオプションでcloudを指定するだけで、実行環境が切り替わるようでした。Cloud MLはどうやら、JSON形式で設定を書き、ハイパーパラメータを自動チューニングするようなことができるようでした。あと、作成済みのモデルはエポック毎の精度や最適なハイパーパラメータの表示を行うことができるみたいでした。コマンドラインで。
Cloud MLを実行中にブレインパッドの方がブレインパッドの事業紹介と、
Tensorflowを活用した事例のニュースリリースの話をされてました。
あと、その前にオモロキという会社の方がboketeという自社WebサービスでVision APIのセーフサーチで、ユーザが不適切な画像をアップロードすることを未然に防ぐことに成功した活用事例を紹介されてました。
2つ目のセッションは、「Cloud DataflowとCloud Pub/Subによるリコメンドのためのストリーム処理基盤」。SpotifyがKafkaやSparkの運用をあきらめて、Cloud Pub/SubとCloud Dataflowの乗り換えた話を聞きました。Spotifyでは秒間70万のイベントが発生するそうで、Kafkaでの運用は難しかったそうです。Cloud Pub/SubでのPOCでは秒間200万イベントの負荷試験も大丈夫だったようで、実際にCloud Pub/Subのデモで、Webコンソールでトピックを作成してその他のチューニングはなしで秒間２百数十万件のデータが流れているグラフを見せていただきました。
Cloud Dataflowの方もストリームETL処理のデモを見せていただき、ステップによっては処理が追いついておらず、データが溜まってしまっているといったデモでした。Cloud DataflowのオフィシャルSDKは現在JavaとPython APIのみですが、SpotifyではScaldingやSparkが広く採用されいるため、Scalaで開発ができるようにDataflow Java APIをラップしたScala API "Scio"がSpotifyによって開発されているそうです。
３時間目は「Google BigQueryで１日１０億行を楽しもう」というセッションで、グーグルの方により、
Dremelという現在も使われているBigQueryのGoogle社内版を含む、
過去１０年ぐらいの取り組みの歴史や、日々改善されているサービスの話がありました。
講演中に実際にBigqueryでクエリを実行して、最後に実行結果を確認するデモを見せていただきました。結果は３０TBぐらいのデータ量を５分程度で処理できたようでした。TBあたり５ドルなので
だいたい１万５千円分の処理だったそうです。
Karteというサービスを提供しているプレイドという会社の方がBigQueryとBigTableを活用した
事例紹介もありました。
あと余談ですが、このセッションの講演者のグーグルの方は「クエリ」の発音が物凄くこなれていて、
「クエ」を短く、「リ」に余裕をもたせる感じで、「クエリ」よりはほぼ「ケリー」でした。このセッションのテーマが「BigQuery」だけに「クエリ」というワードが頻出しまして、他の外来語は全く癖がない発音でしたので、
気になってしまいました。たしかに「ビッグクエリ」よりは「ビッグケリー」の方が若干言いやすいので、頻繁にこのワードを使うようになった際は、「ケリー」に寄せていきたいと思いました。
その次の４時間目は、事例紹介のセッションを聴きました。メルカリのプリンシパルエンジニアの方とDeNAの開発部長の方、Voyage GroupのSEの方の講演でした。
まず、Voyage Groupの方は、確かPyCon2015でも講演されていた方で、
BigQueryを社内で活用している話を聞かせていただき、DeNAの方はGAEを導入して、運用に掛かる労力が無くなり、サービス開発に専念できるのでエンジニアのモチベーションが上がったようなことや、フロントサイドのエンジニアとインフラサイドのエンジニアのコミュニケーションコストも下がったみたいなことを言われてように思います。メルカリのプリンシパルエンジニアの方は、新しいメルカリアッテというサービスでGAEを採用したことで、メルカリユーザの流入で一気にユーザ数が増えてもオートスケールアウトで、運用面をあまり気にする必要がなく、サポートも無人と思っていたところ、優秀なエンジニアが対応してくれたりと、物凄くサービスを褒め称えていて、各地でGAEの良さを伝えるエバンジェリストのようになっているとのことでした。あとGAEのおかげで安心して土日が休めるようになったそうです。DeNAの
開発部長の方は、運用中のGAEサーバクラスタの説明の一部で、内製BIツールArgusの話もされていて、出来がいいので公開した方がいいと考えているそうです。Pentahoにとって脅威になりそうです。あと、「エンジニアのモチベーション」というフレーズを何度か言われたのが好印象でした。
最後は、「Google Container EngineとKubernetesで無理をしないコンテナ管理」というセッションに参加しまして、そちらではグーグルの日本語が流暢な外国の方が日本語でGKEやコンテナ技術のプレゼンをされていました。確かこの方もPyCon２０１５で発表をされていたような気がします。英語セッションで。途中にサイバーエージェントの技術本部マネージャの方が、AmebaTVでの事例を紹介されていました。
GCPのBig DataやMachine Learningカテゴリあたりのサービス導入をご検討のお客様、
是非一度ご相談いただけますと幸いです。
Tweet
