お問い合わせ

コース概要

Vertex AI におけるマルチモーダル LLM の紹介

  • Vertex AI のマルチモーダル機能の概要
  • Gemini モデルとサポートされているモダリティ
  • エンタープライズおよび研究分野でのユースケース

開発環境のセットアップ

  • マルチモーダルワークフロー向けに Vertex AI を設定する
  • モダリティ横断的なデータセットの扱い
  • ハンズオン演習:環境構築とデータセットの準備

長文コンテキストウィンドウと高度な推論

  • 長文コンテキストワークフローの理解
  • 計画立案と意思決定におけるユースケース
  • ハンズオン演習:長文コンテキスト分析の実装

クロスモーダルワークフローの設計

  • テキスト、音声、画像の分析を組み合わせる
  • パイプライン内でマルチモーダルステップをチェーンする
  • ハンズオン演習:マルチモーダルパイプラインの設計

Gemini API パラメータの活用

  • マルチモーダルな入力と出力の設定
  • 推論と効率性の最適化
  • ハンズオン演習:Gemini API パラメータのチューニング

高度なアプリケーションと統合

  • インタラクティブなマルチモーダルエージェントやアシスタント
  • 外部 API やツールの統合
  • ハンズオン演習:マルチモーダルアプリケーションの構築

評価と反復改善

  • マルチモーダルパフォーマンスのテスト
  • 精度、アライメント、ドリフトに関する指標
  • ハンズオン演習:マルチモーダルワークフローの評価

まとめと次のステップ

要求

  • Python プログラミングでの習熟度
  • 機械学習モデル開発の経験
  • マルチモーダルデータ(テキスト、音声、画像)への熟悉度

対象読者

  • AI 研究者
  • 上級開発者
  • ML サイエンティスト
 14 時間

参加者の人数


参加者1人あたりの価格

今後のコース

関連カテゴリー