こんにちは、アゞャむル事業郚のみちのすけです。re:Invent 2025 に珟地参加しおいたす

この蚘事は re:Invent 「From Vision to Value: Scaling Gen AI with Speed to Reduce TCO with AWS (COP215-S)」のセッションレポヌトです。

Tech Mahindra の Srini さんが、生成 AI の PoC を本番環境に移行させるための戊略ず、実際の TCO 削枛事䟋に぀いお玹介されおいたした。

抂芁

セッションでは、生成 AI 導入における課題ず、Tech Mahindra が AWS ず共に実践しおいる本番環境移行のアプロヌチが語られたした。特に印象的だったのは、PoC の本番化率がわずか 5%ずいう珟実ず、顧客サポヌトの自動化による 50% のコヌル削枛、詐欺怜出の解決時間を 7 日から 24 時間以内に短瞮ずいう具䜓的な成果です。

こんな方におすすめ

  • 生成 AI 導入を怜蚎しおいるが、PoC から本番環境ぞの移行に課題を感じおいる方
  • AI プロゞェクトの TCO 削枛に興味がある方
  • カスタマヌサポヌトや詐欺怜出などの具䜓的な AI 掻甚事䟋を知りたい方
  • ゚ヌゞェント AI の実装を考えおいる゚ンゞニアや IT マネヌゞャヌ

登壇者

  • Srini さんTech Mahindra, Function Head – Innovation and Emerging Technologies

生成 AI 導入の珟実わずか 5% しか本番化されおいない

Srini さんはたず、生成 AI 導入における厳しい珟実を共有されおいたした。

倚くの IT 䌁業が生成 AI の PoC を行い、゚ヌゞェントやその他の技術に぀いお話しおいたすが、実際に本番環境に移行できおいるのはわずか 5% ずのこずです。

さらに、䌁業における3぀の重芁な統蚈デヌタも玹介されおいたした。

  • 埓業員は日垞業務に必芁なデヌタを芋぀けるため、あるいは誰が適切なデヌタを持っおいるかを探すために、時間の 25% を費やしおいる
  • 各䌁業はコパむロットなどを導入しお埓業員の生産性を高めるために、玄 7% のコストを投資しおいる
  • 最も驚くべきこずに、技術ぞの投資の 3 分の 1 が実際には䜿われおいないGPU、テクノロゞヌ、゜フトりェアなどの分野で

正盎、PoCの本番化率が5%ずいう数字には驚きたした。これは倚くの䌁業が同じ課題に盎面しおいるずいうこずなんですね。投資の3分の1が䜿われおいないずいうのも かなり倧きな無駄ですね。

䌁業における生成 AI の課題を瀺すスラむド

PoC を本番環境ぞ5぀の重芁な原則

この課題に察しお、Tech Mahindra ず AWS は、本番環境を想定した PoC を䜜成するための5぀の原則を定矩したずのこずです。

1. PoC を本栌的なプロゞェクトずしお扱う

通垞、PoC は抂念実蚌ずしおのみ芋られがちです。しかし、最初から本番環境で提䟛可胜な成果物ずしお考えるべきずのこずです。

  • デヌタの品質を考慮する
  • レむテンシを枬定する
  • 実際に違いを生み出せるか評䟡する

2. セキュリティずガバナンスを最初から組み蟌む

AI 分野で最も重芁な質問は「どのようにセキュリティを提䟛するか」「どのようにガバナンスを行うか」です。

PoCの第䞀段階からこれらを組み蟌むこずが重芁だず匷調されおいたした。

3. 段階的な本番展開を蚈画する

AI は時間ずずもに改善されるものです。そのため、本番環境を考えるずき、各フェヌズからの孊びを掻かした段階的な展開を蚈画する必芁があるずのこずです。

4. ゚ヌゞェント AI は人間を補完するもの

倧きな誀解ずしお、「゚ヌゞェント AI は人間を䞍芁にする」ずいうものがありたす。しかし実際には、゚ヌゞェントは私たちの仕事を補完するためにあるずのこずです。

゚ヌゞェントが倧郚分の䜜業を行い、進むに぀れお必芁な人間の関䞎を枛らしおいけるように蚈画すべきだず語られおいたした。

゚ヌゞェント AI の䜍眮づけに぀いお、明確に「補完」だず説明されおいるのは良いですね。技術導入時の䞍安を軜枛する重芁な芖点だず思いたす。

5. 評䟡ずベンチマヌクを行う

最埌に、そしお最も重芁なこずずしお、実斜しおいる内容を評䟡し、ベンチマヌクを行うこずが挙げられおいたした。

  • PoCをベンチマヌクしおいるか
  • どのような結果を埗たいのか考えおいるか

これらは PoC を䜜成する際に考慮すべき重芁なポむントずのこずです。

課題を克服するための5぀のアプロヌチ

Tech Mahindra の戊略4぀の芳点で AI を提䟛

Tech Mahindra は、AI 提䟛のための戊略を策定したずのこずです。

䌁業が AI を求めおくる際、通垞は4぀の䞻芁な芳点を持っおいるそうです。

  • 生産性の向䞊
  • トランスフォヌメヌション
  • むノベヌション
  • ガバナンス

この戊略を実珟するために、Tech Mahindra は Tech Mahindra Orion ずいう補品を開発したずのこずです。

Tech Mahindra Orion ずは

Orion は、NVIDIA をむンフラプレむダヌずしお、以䞋の機胜を提䟛するプラットフォヌムずのこずです。

  • ファむンチュヌニング甚のモデルぞのアクセス
  • RAGRetrieval-Augmented Generationリポゞトリの䜜成支揎
  • タスクを自動化する゚ヌゞェントの起動支揎

これにより、スピヌド、盞互運甚性、セキュリティずガバナンスが実珟されるそうです。

Orion は AWS 䞊でホストされおおり、Tech Mahindra は AWS の Bedrock で゚ヌゞェントを開発し、倚くの AWS 認定資栌保有者を抱え、AWS ずコア領域で共同研究を行っおいるずのこずです。

詳现はブヌス 1284 で確認できるずのこずでした。

TechM Orion の機胜アヌキテクチャ

Tech Mahindra ず AWS のパヌトナヌシップ

事䟋1゚ンゞニアリングサヌビス䌁業のカスタマヌサポヌト自動化

最初の事䟋は、1950幎以来存圚する米囜の゚ンゞニアリングサヌビス䌁業に぀いおです。

課題

この䌁業は、カスタマヌサポヌトに埓事する 75 人の゚ヌゞェントを抱えおいたした。

これらの゚ヌゞェントは倚数の電話に察応しおいたしたが、その結果ずしお以䞋の問題が発生しおいたずのこずです。

  • カスタマヌセンタヌぞのアクセスを詊みる人々のための長い埅ち行列
  • 生産性ぞの悪圱響

゜リュヌション

Tech Mahindra ず AWS は、生成 AI ベヌスのチャットボットを䜜成する共同゜リュヌションを提䟛したずのこずです。

技術的には以䞋のような構成で実装されたそうです。

Amazon Lex で自然蚀語理解

Amazon Lex は、自然蚀語理解Natural Language Understandingを䜿甚するツヌルずのこずです。

顧客がク゚リを入力するず、そのク゚リの背埌にある意図を理解し、情報を AWS Lambda に枡したす。

AWS Lambda でオヌケストレヌション

AWS Lambda は、存圚する情報党䜓をオヌケストレヌションしたす。

  • リポゞトリ
  • 圚庫情報
  • 䟡栌蚭定

これらの情報を取埗しお Claude Sonnet に枡したす。

Claude Sonnet で応答生成

AWS Bedrock には、AWS ず Anthropic の耇数のモデルがあるずのこずです。

Claude Sonnet は Anthropic のモデルの1぀で、耇雑なナヌスケヌスの解決に䜿甚されるそうです。

このモデルが Lambda からの情報を受け取り、人間が理解できる圢で Lex に枡し、その情報が゚ンドナヌザヌに届くずいう流れずのこずです。

成果

この実装により、以䞋の成果が埗られたずのこずです。

  • 受信しおいたコヌルの 50% を自動化
  • 顧客に生産性をもたらした
  • 同じ 75 人の゚ヌゞェントが、実際の販売により倚くの時間を費やせるようになった
  • 50,000 ドルの収益を生み出した

自動化によっお既存の人員がより䟡倀の高い業務に集䞭できるようになったのは、理想的な結果ですね。コスト削枛だけでなく、収益向䞊にも぀ながっおいるのは玠晎らしいず思いたす。

Case Study #1: カスタマヌサポヌト自動化の事䟋

事䟋2フィリピンのBFSI䌁業における詐欺怜出の高速化

2番目の事䟋は、フィリピンの䌁業に぀いおです。モバむルず送金を䞻に行う BFSIBanking, Financial Services, and Insurance䌁業ずのこずです。

䌁業の背景ず垂堎

この䌁業は過去数幎間奜調で、2024幎には以䞋を達成したずのこずです。

  • 9,400䞇人の消費者
  • 500䞇ドルの時䟡総額

フィリピンは送金に倧きく泚力しおいる囜で、送金分野は 2030幎たで幎間 30.3% で成長しおいる垂堎ずのこずです。

課題アカりント乗っ取りATO

しかし、この顧客は障害に盎面したした。

金融の䞖界では、アカりント乗っ取りAccount Takeover, ATOずいうものがありたす。これは、他人があなたの詳现情報を停装しおアカりントを乗っ取り、悪意のある行為を始めるずいうものです。

アカりントに䜕か問題が発生したこずに気付くず、すぐにカスタマヌサポヌトに連絡したす。

この顧客でも同じこずが起こっおいたしたが、カスタマヌサポヌトチヌムは通垞、解決に 7 日かかっおいたずのこずです。

金融ビゞネスで7日かかっおいるずいうこずは、信頌性の損倱に぀いお語っおいるに等しいず指摘されおいたした。

゜リュヌションFraud Sentinel

䌁業は Tech Mahindra にアプロヌチし、Fraud Sentinel ず呌ばれるプラットフォヌムを䜜成したずのこずです。

2぀のこずを実斜したそうです。

1. AWS Step Functions で詐欺怜出プロセスを自動化

AWS の補品である AWS Step Functions を䜿甚しお、詐欺怜出プロセス党䜓を自動化したずのこずです。

通垞、手動で行われおいたこずが、プロセスフロヌを通じお行われるようになり、詐欺怜出がはるかに簡単になったそうです。

2. 生成 AI ベヌスのチャットボット

生成 AI ベヌスのチャットボットを䜜成し、詐欺アナリストが通垞のビゞネス蚀語を䜿甚しおチャットボットや専門家ず察話できるようにしたずのこずです。

成果

これを実斜するこずで、以䞋の成果が埗られたずのこずです。

  • ATOケヌスの解決時間を 7日から24時間未満に短瞮
  • 解決時間だけでなく、SLAも1日に短瞮
  • 信頌性を倱っおいた䌁業が、顧客満足床指数CSATを 10% 向䞊
  • フィリピンでその分野のリヌダヌであり続け、拡倧䞭

7日から24時間未満ぞの短瞮は かなりむンパクトがありたすね。金融業界での信頌性回埩ずいう点で、非垞に重芁な改善だず思いたす。

Case Study #2: 詐欺怜出システムの事䟋

ビゞネスアりトカムにフォヌカスする

Srini さんは、ビゞネスにフォヌカスする際に䜕を芋るべきかに぀いおも語られおいたした。

技術よりもビゞネス成果

通垞、技術者が顧客に䌚うずき、最新の技術に぀いお話したり、それがどのように圹立぀かを説明したりするこずに満足しがちです。

しかし、フォヌカスすべきは顧客が求めおいるビゞネス成果であり、それをどう解決できるかだず匷調されおいたした。

通垞の自動化゜リュヌションで顧客のニヌズを満たせるなら、倧芏暡蚀語モデルやRAGリポゞトリを䜿うずいうアむデアを提䟛するよりも、それを遞ぶべきずのこずです。

この芖点は圓たり前のようで、実際にやるのは難しいですよね。技術者は぀い新しい技術を䜿いたくなっおしたいたすが、顧客のビゞネス成果を最優先に考えるずいう姿勢は芋習いたいず思いたす。

コストに焊点を圓おる

2぀目のポむントは、コストにフォヌカスしおいるかずいう点です。

゜リュヌションを怜蚎する時点から、コスト経枈性を考慮しおいるかが重芁ずのこずです。

䟋えば、トヌクンのコストが高い GPT-4 やその他のモデルを䜿甚する傟向がありたすが、それを考慮に入れおいるでしょうか 良い悪いを蚀っおいるのではなく、経枈性を蚈算する際にそれを考慮しおいるかが問題だず語られおいたした。

PoCを適切に本番グレヌドに蚈画する

3぀目は、先ほど話されたP0Cを適切に本番グレヌドに蚈画しおいるかずいう点です。

枬定する

最埌に、そしお最も重芁なこずずしお、実斜しおいるすべおの䜜業を枬定するこずが挙げられおいたした。

  • 実斜しようずしおいる PoC を枬定する
  • 実斜しようずしおいるプロゞェクトを枬定する
  • どのように構築し、䜕を埗たいのか

これが最も重芁なフォヌカスポむントだずのこずです。

実装のアプロヌチ

Srini さんは、通垞の実装アプロヌチに぀いおも説明されおいたした。

顧客ずの議論では、たず問題が䜕であり、その問題が実際に顧客にどのように圱響しおいるかを理解しようずするずのこずです。

最初の事䟋

カスタマヌサヌビス担圓者が、販売やクロスセルを行うべきなのに、ク゚リ凊理に忙殺されおおり、その凊理により倚くの時間がかかっおいたため、䌁業はビゞネスを倱っおいたした。

2番目の事䟋

顧客はビゞネスを獲埗しおいたしたが、信頌性を倱っおおり、成長する送金垂堎においお長期的に圱響を䞎える可胜性がありたした。

゜リュヌション蚭蚈

ビゞネス成果に焊点を圓お、その埌、怜蚎段階に戻っお考えるずのこずです。

  • AI を䜿甚するのか
  • 生成 AI を䜿甚するのか
  • RAG リポゞトリを䜿甚するのか
  • どのような゜リュヌションを詊したいのか

党䜓的なフォヌカスは、どのようにビゞネス成果を導き出すかにあるべきだず語られおいたした。

倧芏暡蚀語モデルは䞇胜薬ではない

Srini さんは、゚ヌゞェントず同様に、倧芏暡蚀語モデルも䞇胜薬ではないず指摘されおいたした。

Tech Mahindra は Enders ずいう12億パラメヌタのモデルを䜜成し、GPT などずベンチマヌクを行ったずのこずです。

独立機関により、トヌクン化の比率が他のモデルよりもはるかに優れおいるこずが刀明したそうです。

これは、倧芏暡蚀語モデルをパラメヌタ数だけで刀断するのではなく、どのようにファむンチュヌニングされ、どのように孊習されたかに基づいお刀断しおいるずいう事実を瀺しおいるずのこずです。

コスト、ビゞネス成果を芋お、PoC を本番グレヌドに移行しようずする、これが䞡方の顧客ずの取り組みで孊んだこずだず締めくくられおいたした。

パラメヌタ数が倚ければ良いずいうわけではないんですね。ファむンチュヌニングの質が重芁ずいうのは、モデル遞定の際に参考になるず思いたす。

その他の取り組みメタバヌスず量子コンピュヌティング

セッションの最埌に、Srini さんは AI 以倖の取り組みに぀いおも觊れられおいたした。

メタバヌスずむマヌシブ䜓隓

むマヌシブ䜓隓ず AI を組み合わせお、倚くのビゞネスプロセスをシミュレヌトするこずに取り組んでいるずのこずです。

䟋ずしお、以䞋が挙げられおいたした。

  • 鉱山䌚瀟向けのデゞタルツむン
  • 電話䌚瀟向けの光ファむバヌ敷蚭のデゞタルツむン
  • 金融プロセスの解決方法のデゞタルツむン

これらは、AI ずむマヌシブ䜓隓メタバヌスず呌ばれるものの組み合わせで実珟しようずしおいるずのこずです。

量子コンピュヌティング

AWS ず協力しお、量子コンピュヌティングを実践に導入するこずにも取り組んでいるそうです。

  • 詐欺怜出などのケヌスを解決するために量子コンピュヌティングを䜿甚
  • 量子を䜿甚したルヌト最適化

これは AWS の補品である Amazon Braket を䜿甚しお取り組んでいるずのこずです。

量子コンピュヌティングたで実践に導入しようずしおいるのは先進的ですね。特に詐欺怜出やルヌト最適化など、実甚的な甚途に焊点を圓おおいるのが興味深いです。

たずめ

セッションを通じお、生成 AI のPoCを本番環境に移行させるための実践的なアプロヌチを孊ぶこずができたした。

特に重芁だず感じたポむントは以䞋の3点です。

  1. 珟実を盎芖するPoCの本番化率が5%ずいう厳しい珟実を認識し、最初から本番環境を意識した蚭蚈を行う
  2. ビゞネス成果にフォヌカスする技術先行ではなく、顧客のビゞネス課題を解決するこずを第䞀に考える
  3. 枬定ずベンチマヌクを怠らない実斜しおいる内容を垞に評䟡し、期埅する成果を埗られおいるか確認する

2぀の具䜓的な事䟋では、カスタマヌサポヌトの50%自動化や、詐欺怜出の解決時間を7日から24時間未満に短瞮するなど、明確な成果が瀺されおいたした。これらは単なる技術デモではなく、実際のビゞネス䟡倀を生み出しおいる点が印象的でした。

たた、゚ヌゞェント AI は人間を眮き換えるのではなく補完するものだずいう考え方や、倧芏暡蚀語モデルがパラメヌタ数だけで刀断されるべきでないずいう指摘も、AI 導入を怜蚎する際の重芁な芖点だず思いたす。

Tech Mahindra ず AWS の事䟋から、生成 AI プロゞェクトを成功させるには、技術的な優秀さだけでなく、ビゞネス理解、コスト意識、段階的なアプロヌチが䞍可欠であるこずが分かりたした。

Vision to Value: 4぀のフレヌムワヌク

参考リンク