Human-in-the-Loop を題材にした機械学習の勉強会を開催した

先日の記事で告知した¹のですが、昨夜、「Human In The Loop」を題材にした勉強会を開催してきました。

実際に Human In The Loop を扱った MLOps の論文² を過去に書いているくらい興味のある分野なので、この領域を盛り上げていくために開催できてよかった。

オンライン勉強会でしたので、配信動画を Youtube で公開しております。 Human In The Loop に興味のある方はぜひご覧ください。

Machine Learning Casual Talks #13 (Online)

各発表について

各発表の説明は割愛して、一言感想を述べさせていただきます。

Editors-in-the-loop なニュース記事要約システムの提案 by @upura

業務成果を国際会議のワークショップに通されたの素晴らしいですね 👏 (自分も論文を出したことがありますが)、論文を書くことが目的ではない職種で論文を出すのはそもそも体力が必要なので、提出してなおかつ採択されたのは素晴らしいの一言!

Active Learning for Auto Annotation by @tkc79

自分たちのプロダクトで実際に能動学習の効果を検証して学びを得るというのは得難い経験ですね。尊い! 実際にやってみた上での実践的な経験を語ってくれたのが面白かったです。

NeurIPS Data-Centric AI Workshop by @K_Ryuichirou

Data Centric AI Workshop の要約を話して頂きました。 The Godfather of MLOps である D.Sculley さん ³が 「Technical Debt in ML: A Data-Centric View」の話をされていたらしいのですが、これは見なければ…! Moneyfoward 様での業務で @K-Ryuichirou 様が作られた資料なのですが、公開を快諾して頂き、Moneyfoward 様、 @K-Ryuichirou さまありがとうございました。

勉強会の運営振り返り

オフラインと比べると圧倒的に楽、楽すぎる。これに尽きる。 事前の運営コストの見積もり予想がバッチリあたって何より⁴。 代償としては、やはりオフライン懇親会とオンライン懇親会は似て非なるものということを実感できたが、運営者観点でいうとアリよりのアリではと感じた。

配信のリアルタイム視聴者は最大 98 人で、勉強会の参加ページは 258 人だったので、見込みに対して 4 割程度の方がリアルタイムに配信を視聴してくれた。

Streamyard が神ツール。これが無料とは…

OBS で頑張って配信しなくても、Streamyard を使えば Web アプリだけでヨイカンジの配信できるなんて感動ですね。 前回の MLCT 12 回目のイベントの配信時⁵には @chezou さんにマシンに火を吹いてもらって配信してもらっていたんですが、今回は @chezou さんがバンクーバーにいらっしゃるので代わりに Streamyard を使うことにしました。

実際に使ってみると、招待リンクで登壇者を Web 上で完結して招待可能なのがとても便利。Web アプリベースなので、Zoom などであるあるの「あれうまく接続できないですね..」が無い。Chrome のカメラやマイク設定の承認で一度再入出する必要があったが、それは 2-3m でトラブルシューティングを完了したので全く問題がなかった。

また、開催者が Streamyard 参加者の画面を配信に投影するかどうかを調整可能なのも良い。複数人の参加者の画面共有を共存して待機することができるので、事前に登壇者の画面を共有してもらうことで、司会のスライドから登壇者の画面へ滑らかに遷移が可能なのでぐだつかない。DJ(というより VJ?) のように、画面を差し替えて進行していけるのは楽しさがあった。

配信時の画面レイアウトが複数パターンあり、いろんな配信パターンに対応できる。資料と登壇者を移したり、登壇者だけでグリッド状に配信したりと良い感じに配信が行える。

音楽配信も Streamyard 付随の音楽をアイスブレイクに流せる(動画も流せる)ので、無音で気まずい空気が流れるのもこれで回避できる。

プライベートチャットで、時間のリマインドやコミュニケーションが Streamyard 内で完結できる。配信者としては Streamyard 内ですべて完結してコミュニケーションが取れるのはありがたい。登壇者へのタイムスケジュールのリマインドもここで行える。

Youtube 配信が簡単に配信できる。認証すればすべてが Streamyard 内で完了する。Youtube のコメントが Streamyard 内でできるので、簡単にアナウンスができる。当日判明したのは Youtube 側のコメントが誰もがコメントできるように開放されていなかったので、何かしらの設定が必要なのかも知れない。

以上を踏まえて、いたせりつくせりの機能となっており、Streamyard のウォーターマークが動画に入るとはいえ、無料で使わせていただいて良いのだろうかと心配になるほどいい感じの配信ができた。

オンライン懇親会

今回の懇親会は、 gather.town で開催しました。当初は spatial.chat で開催予定でしたが無料枠の参加人数がソッと 50 人から 25 人に減っていた。ならば無料枠の参加人数が同じで自分にとって馴染みのあるツールである gather を採用することにしました。

参加人数は 8-9 人程度で、一つの輪になって話す感じでリアルな懇親会での偶発性がある出会いはなかなか難しいですが、10 人以下のグループで話が発生するので、オンライン懇親会の開催自体は全然ありだなと思いました。開催コストも 0 なので、やって損はなし。

個人的な理想としては、8-9 人の参加者だと 4 人グループ x 2 のような構成ができると嬉しいなと思いつつ、ここらへんの考えは人によって異なるので色々と模索していきたい。 Zoom や Google Meet のブレイクアウト機能が、矯正分割してワイワイ感を増せるのだが、懇親会に参加している人が必ずしも喋りたいというわけではない(グループに参加して話を聞くだけでも十分という人もいそう)と思うので、良い塩梅って難しい。

総評

久々の勉強会の主催ですが、オフラインのコスト 1/10 くらいで実現できて感動しつつ、また機運があれば開催したいなと思っております。

改めて、Twitter⁶ での突発的な募集にも関わらず手を上げてくださった登壇者の @upura さん、 @tkc79 さん、 @K_Ryuichiro さんありがとうございました。 また、実況や配信の監視などを行っていただいた共同運営者の @tetsuroito さん、ありがとうございました!

オンライン配信ならではの楽しさとしては、オフラインだと 100 人が参加する会場を手配したり設営するだけでも大変ですが、オンラインだと 100 人閲覧というリアルタイムな参加者だけに着目するとパソコンだけで実現できるのでそれは素晴らしいことですね。