セッションタイトル: What’s next with generative AI at Google Cloud
スピーカー: Warren Barkley, Polong Lin, Kalyan Pamarthy, Fiona Tan

この記事は？

今回のNext ’24におけるGoogle Cloud AIのオールスター祭りのようなセッション。の全体像把握のための記事です。

セッション本編です

今回のセッションの全体像から！

• Agent Builder
• Model Builder
• Model Garden

まずはModel Gardenからスタート

現在、Model Gardenでは130以上のモデルを使用できます。
もはやギャラリー。Model Gardenをぼーと眺めてるだけでも楽しいですよね。

首を長ーくして待っていたGemini 1.0 Proがようやく…

Gemini 1.0 Pro！GA！

からのGemini 1.5 Pro！プレビュー！
そして、コンテキストウィンドウが1M！Gemini 1.0 Proが32Kだったので、さらに理解力があがりそうですね。早く触り倒したいところ。

Vertex AI基盤モデル、怒涛の紹介ラッシュ

まずは全体像。
ただし、Chirp 2.0 for speech-to-textについては、まだ情報がありませんでした…。果報は寝て待てことですね。

Imagen 2.0

Text-to-Live images

プレビュー
なんと文字からライブ画像（4秒まで）を作れるようになりました！
画像では伝わないですが…、動画だと滑らかに動いていました。また、クリエイティブが捗りますね。

Digital Watermarking

GA

Cloude 3 on Vertex AI

GA
今みんなのハート射止めているCloude 3がVertex AIでもGAとなりました！
Opusはまだなんだとか。楽しみにしておきましょう！

Gemma

GA
Googleの最新のオープンモデル。軽量。
もともとは、Geminiと同じ技術で開発しているようなので、Geminiの兄弟みたいなイメージでいます。
まだ情報がそこまで多くなく、謎に包まれていますが、果たして精度はどうなのか…！

Hugging Face integration with Vertex AI

GA

Org policy

プレビュー

続いてModel Builder！

Supervised, adapter-based tuning for Gemini

プレビュー

Prompt management

プレビュー

最後にAgent Builder！

Agent Builderはノーコード〜ハイコードの場合にどんなツールがあるのか。

Vertex AI agents

プレビュー

LangChain on Vertex AI

LangChainのオープンソースライブラリを使用して、Generative AIアプリケーションをカスタムビルドできるようになるようですね。

Ground with Google Search

プレビュー
これは待ち望んでいた方多いのではないでしょうか。
Googleといえば検索！の強みを存分に活かして、品質の高い回答が期待できますね！

Vertex AI Searchを自分で作るなら…！

他のセッションでも少しずつ情報が出ていた、セルフRAGシステム系API

• Document Processing API（プレビュー）
• Vector Search (GA)
• Ranking API（プレビュー）
• Grounded Generation API（プレビュー）
• Check Grounding API（プレビュー）

API系のプレビューが多すぎて、うれしい悲鳴ですね。
夢が広がる、やりたいことが多すぎる。

まとめよう

供給過多すぎてもオタク発狂するとはこのことです。（いい意味で）
AI界隈全体に言えることですが、進化が早くてとてもExcitingです。