イベント概要

LLMアプリケーションは作り始めるのは簡単ですが、本格的な開発で必要となる「評価」については難しいと言われます。

この勉強会では、LLMアプリケーションの「評価」について、以下のようなテーマで登壇者が議論します。

• 「もし◯◯を開発するなら、評価にはどう取り組む？」
• 「RAGの評価、AIエージェントの評価ってどうするの？」
• 「評価駆動開発ってどう思う？」

上記以外に、参加登録時のアンケートの回答もテーマに取り込む予定です。

主な対象者

• LLMアプリケーションの開発に関わっていて、評価に関心がある方

前提とする知識

以下の言葉が伝わる程度のLLMアプリケーションの評価の基礎知識

• データセット
• リリース前の評価、リリース後の評価
• LLM-as-a-Judge

タイムテーブル

※質疑の内容や数などにより、終了時刻が前後する可能性があります。

会場

オンラインでの開催となります

※ 参加登録してくださった方に、このページ上部の「参加者への情報」の欄にウェビナーのURLが表示されます。

登壇者プロフィール

大嶋 勇樹 @oshima_123 (株式会社ジェネラティブエージェンツ)

株式会社ジェネラティブエージェンツ取締役CTO/Co-founder。大規模言語モデルを組み込んだアプリケーションやAIエージェントの開発を実施。個人ではエンジニア向けの勉強会開催や教材作成など。オンラインコースUdemyではベストセラー講座多数。勉強会コミュニティStudyCo運営。共著書「ChatGPT/LangChainによるチャットシステム構築［実践］入門」「LangChainとLangGraphによるRAG・AIエージェント［実践］入門」。

上野彰大 @ueeeeniki (PharmaX株式会社 取締役・エンジニアリング責任者)

東京大学農学生命科学研究科卒業。大阪府堺市出身。新卒でIGPI（経営共創基盤）に入社し、2018年12月にPharmaX株式会社（旧・株式会社YOJO Technologies）を共同創業。全社戦略、エンジニアリング責任者。趣味でエンジニアリング勉強会を数年続けている。得意なのは、統計、機械学習、データ分析。

吉田拓 @pcryta (FrontierTech合同会社 代表)

FrontierTech合同会社 代表。「テクノロジーで "はじめる" を "ささえる"」を掲げ、経営課題からコードの一行まで戦略、組織、実行を一貫してサポート。最近は LLMを使ったアプリケーション開発や、組織にあわせた生成AIの活用支援なども提供。勉強会 StudyCo を運営。趣味はコーヒー。

その他登壇者

掲載予定