Beyond AIで運営する高性能GPU「SANDBOX」を用いた2024年の取り組みまとめ

図１：「SANDBOX」の概要

2 - ACCV学会でのコンテスト実施

Beyond AI推進課では、LLMコンソーシアムと協力して、ベトナム・ハノイで開催されたアジアコンピュータビジョン会議（ACCV 2024）で「LAVAワークショップチャレンジ」と題したコンテストを実施しました。

LAVAワークショップチャレンジの内容は、データフローダイアグラム（DFD）やクラス図、ガントチャート、建物設計図などの複雑な視覚データを大規模視覚言語モデルで正確に解釈し理解する能力を向上させることです。このチャレンジにより、キュレーションされたデータセットと強固な評価フレームワークを使用してAIモデルのパフォーマンスを向上させることを目的としているのです。

Beyond AI推進課とLLMコンソーシアムはこのチャレンジのために、インターネットから収集された約3,000のサンプルを含む公開データセットに加え、ソフトバンクのTASUKI事業部に提供いただいた約1,100のサンプルを含む非公開データセットを、特別にベンチマークデータセットとして準備しました。

ワークショップには、日本、ベトナム、バングラデシュ、シンガポールなどの国々から12の国際チームが参加しました。

参加者は、このチャレンジで、入力データに関連する質問に答えることのできるモデルを続々と開発していました。特に、東京大学に所属する参加者には、計算支援としてSANDBOXのGPUを有効に活用したモデルを作成いただきました。

3 - コミュニティ/イベントの運営

ACCV学会への参加以外にもSANDBOXのコミュニティで様々な勉強会を実施したり、ポスター展示会に出展を行ったりしました

3-1 LLMコンソーシアムの勉強会：

LLMコンソーシアムは毎月、定期的に勉強会を開催しています。この勉強会では、最新の研究や技術のトピックについて深く掘り下げ、参加者同士の知識の共有と意見交換を実施しています。これにより、学術研究者と企業エンジニアとの協力が強化され、LLM技術の現実世界への応用に繋がるのです。これまで実施した勉強会を以下にまとめてみました！

図２：LLMコンソーシアム勉強会の内容

3-2 生成AI勉強会：

生成AIに関する最新の研究や応用技術について議論するために、定期的な勉強会が開催されています。このグループでは、生成AIの基本概念や実際の応用事例について学び、参加者同士の知見を深めることができました。こちらも、これまで実施した勉強会のタイトルを紹介します。

① 生成 AI の最新トレンドと課題（Latest Trends and challenges in Generative AI）(2月20日)

講演者: Dr. Khan Md. Anwarus Salam (ソフトバンク AI戦略室)

②「作って学ぶ日本語大規模言語モデル」の紹介(4月23日)

講演者: 加藤 公一氏 (ソフトバンク AI戦略室)

③ Conversational Personal Knowledge Extraction for Persona-Aware Dialogue Generation (ペルソナ認識対話生成のための会話型個人知識抽出)(9月3日)

講演者: 陳 宜珮氏 (東京大学 情報理工学系研究科 博士課程)

3-3 ポスター発表会の実施とSANDBOXでのポスター展示：

11月26日には、Beyond AI研究推進機構主催でポスター発表会を実施しました。各研究者からの研究ポスター発表はもちろん、ソフトバンクからもSANDBOX、Axross、およびLLMコンソーシアムをはじめとしたの共同取り組みや研究成果を紹介するため、ポスターを出展しました。

図３：ポスター発表会の様子

5 - SuperPODを活用する研究プロジェクト募集の実施

現在、Beyond AIでは、SANDBOXに次いでさらに新しいGPUサーバとして「SuperPOD」を導入しています。

Beyond AI推進課では、東京大学の研究者に対してSuperPODインフラを活用するためのプロジェクト提案を募集しています。プロジェクトの内容に関しては、AIに関する基礎研究はもちろん、実世界へのAIの応用を狙ったハイサイクル応用研究プロジェクトでも応募可能としています。

採択された場合は、NVIDIA DGX SuperPODへの無料アクセスとその環境設定およびトレーニングデータの準備だけでなく、プロジェクトごとに最大1000万円の資金提供も実施して研究プロジェクトを全力でバックアップする予定です。

先述のBeyond AIのポスター発表イベントでは、「SuperPODを活用して課題解決に挑戦する研究グループの公募について」という特別講演も行われ、ソフトバンクが関心を持つさまざまな研究トピックを研究者の皆様に紹介しました。

図４：SuperPODを活用したプロジェクト募集についての講演の様子

6 - SANDBOXのこれからの活動と展望

最後に、Beyond AI SANDBOXの将来展望についてお話させてください。

SANDBOXでは、高速なデータ処理、リアルタイムAIアプリケーション、大規模な視覚言語モデル、生成AIの進展をサポートしてきました。これらの最先端の技術進歩と戦略的提携とを通じて、最終的には基礎研究と実用的応用の橋渡しも行うようにすることで、学術的なブレークスルーを迅速に実世界のソリューションへと応用できるようなイノベーションのエコシステムを目指しています。このエコシステムこそが、グローバルな影響力の拡大に繋がるのです。

Beyond AI推進課ではこれから、次世代のGPUや高度なストレージシステムを備えたインフラのアップグレードに向けて続々と投資を実施しつつ、これらの計算リソースを最新のAIフレームワークや高度なツールと統合していくことで、SANDBOXを通して創造性と効率性を育むシームレスな研究体験を研究者の皆様に提供していきます。

さらに、SANDBOXはAIガバナンス、安全性、公平性などの課題に取り組むため、グローバルなAIコンソーシアムや規制機関との連携も強化する予定です。

最先端技術への継続的な投資を通じて、SANDBOXは社会的利益のために変革的なAI技術を先導するイノベーションを支援していきます。

まとめ

今回はKhanさんにお話を聞いてみました。いかがでしたでしょうか。Beyond AI SANDBOXは、高性能な計算リソースの提供から、影響力のあるコミュニティイベントの開催に至るまで、イノベーションを育むハブとして機能しています。これからも更に計算資源に投資してより大規模な研究を行うということで、大変楽しみですね。

それではアドベントカレンダーもあと3日、次の記事にバトンを渡そうと思います！

また来年お会いしましょう！良いお年を〜〜

それでは、次回のソフトバンク アドベントカレンダーもお楽しみに！！！