お問い合わせを送信いただきありがとうございます!当社のスタッフがすぐにご連絡いたします。
予約を送信いただきありがとうございます!当社のスタッフがすぐにご連絡いたします。
期間 14 時間
コース概要
Vertex AI におけるマルチモーダル LLM の紹介
- Vertex AI のマルチモーダル機能の概要
- Gemini モデルとサポートされているモダリティ
- エンタープライズおよび研究分野でのユースケース
開発環境のセットアップ
- マルチモーダルワークフロー向けに Vertex AI を設定する
- モダリティ横断的なデータセットの扱い
- ハンズオン演習:環境構築とデータセットの準備
長文コンテキストウィンドウと高度な推論
- 長文コンテキストワークフローの理解
- 計画立案と意思決定におけるユースケース
- ハンズオン演習:長文コンテキスト分析の実装
クロスモーダルワークフローの設計
- テキスト、音声、画像の分析を組み合わせる
- パイプライン内でマルチモーダルステップをチェーンする
- ハンズオン演習:マルチモーダルパイプラインの設計
Gemini API パラメータの活用
- マルチモーダルな入力と出力の設定
- 推論と効率性の最適化
- ハンズオン演習:Gemini API パラメータのチューニング
高度なアプリケーションと統合
- インタラクティブなマルチモーダルエージェントやアシスタント
- 外部 API やツールの統合
- ハンズオン演習:マルチモーダルアプリケーションの構築
評価と反復改善
- マルチモーダルパフォーマンスのテスト
- 精度、アライメント、ドリフトに関する指標
- ハンズオン演習:マルチモーダルワークフローの評価
まとめと次のステップ
要求
- Python プログラミングでの習熟度
- 機械学習モデル開発の経験
- マルチモーダルデータ(テキスト、音声、画像)への熟悉度
対象読者
- AI 研究者
- 上級開発者
- ML サイエンティスト