LLMアプリの品質、どう守る？ 〜皆で語る"実践的な"評価とモニタリング手法〜

本イベントについて

LLM（大規模言語モデル）を活用したアプリケーション開発が急速に進む中、その「品質」をいかに評価し、管理していくかは、多くの開発者にとって喫緊の課題となっています。

今回のミートアップでは、LLMアプリケーションのデバッグと可観測性のためのオープンプラットフォームを提供する Langfuse の創業者たちを迎え、LayerX、AWSジャパン、そしてガオといった、LLM開発の最前線に立つ企業が一堂に会します。

「実世界のAIシステムの現実的な評価」をテーマに、各社の実践知だけでなく、参加者の皆さまの疑問やプラクティスを持ち寄る場です。

RAG評価、Prompt Engineering管理、プロダクション環境での品質モニタリングなど、各社が直面した課題、試行錯誤したアプローチ、そしてトレードオフや教訓を、具体的な事例とともに共有します。スタートアップから大手クラウドベンダーまで、異なる立場からの視点が揃うからこそ、得られる学びがあるはずです。

当日は、参加者の皆さまとも積極的に知見や疑問を交換する、双方向のディスカッション時間を設けています。

登壇者だけでなく、参加者全員がそれぞれの現場で得た経験を持ち寄り、互いに学び合える場にしましょう！

【同時通訳ツールをご利用いただけます】

このイベントでは英語と日本語のセッションが含まれるため、同時通訳ツールの導入を検討しています。
お手持ちのスマートフォンからリアルタイムの文字起こしをご覧いただけるようにする予定です。

どんな方におすすめ？

• LLMを利用したアプリケーションを現在開発している（または、まもなく開発する予定の）エンジニア、プロダクトマネージャー、マネージャーの方
• LLMの出力品質の管理に悩みがある方
• LLMシステムの品質評価に関する他社の具体的なケーススタディやベストプラクティス、アンチパターンを知りたい方

席数には限りがあります。ぜひお早めにご参加登録ください！お待ちしております！

イベント概要

タイムテーブル

※タイムテーブルや内容は変更となる可能性があります。

ご案内

• 定員に達した場合は締め切りとさせていただきます。
• 当日の様子を撮影した写真等は共催各社のソーシャルメディアやウェブサイト等で掲載させていただく可能性がございます。
• ディスカッションが盛り上がるよう、簡単な軽食をご用意する予定です。

登壇者（調整中）

Tim Mansfield | LayerX

LayerX Ai Workforce事業部, FDE team

Tech lead at Google and YouTube in the 00's. Since then, engineer / EM / CTO at various startups. Based in Tokyo.

Clemens Rawert | Langfuse @rawert

Co-Founder, Langfuse

Co-founded Langfuse. Based out of San Francisco and runs Langfuse's go-to-market activities.

Akio Nuernberger | Langfuse @AkioNuernberger

Founding GTM Engineer, Langfuse

Akio joined Langfuse recently and works with different customer teams to unlock value with Langfuse.

嘉門延親 (KAMON Nobuchika) | ガオ株式会社

ガオ株式会社 代表取締役

クラウドおよびデータ基盤などの分野において 20 年以上の経験をもち、近年では Mirantis および Aiven のカントリーマネージャーとして日本における戦略的計画とその展開を実現。2024年10 月、ガオ株式会社の設立に合わせて代表取締役に就任。

久保 隆宏 | アマゾンウェブサービスジャパン合同会社 @icoxfog417

AWS Japan Senior ML Engineer, Developer Relations

2021 年より AWS の機械学習領域専門のデベロッパーリレーションに従事。 AWS が機械学習をはじめるのに最適なプラットフォームになるよう、戦略の立案、コンテンツの開発、フィードバックの収集に基づくサービス開発チームへの提案まで一気通貫で活動。近年特にプロダクト開発チーム向けの機械学習活用支援に従事。 GitHub で公開している ML Enablement Workshop は AWS Japan の中で最も Star 数の多いリポジトリの一つに。

行動規範

• LayerX イベント行動規範

※困ったことなどありましたら、当イベントページの「イベントへのお問い合わせ」 までご連絡ください。

プライバシーポリシー

本イベントで取得する個人情報のお取り扱い方針は、以下のポリシーを参照願います。

• https://layerx.co.jp/privacy
• https://jobs.layerx.co.jp/privacy
• https://www.gao-ai.com/privacypolicy
• https://langfuse.com/privacy

注意事項

ご提供いただいた個人情報は、イベントの運営や管理、登壇企業のサービス情報、採用情報等のご案内のため、参加登壇企業及びスポンサー企業様と共有させていただく可能性がございます。