ja

Dataiku LLMメッシュ

Dataiku LLMメッシュにより、コスト管理、コンプライアンス、セキュリティーの懸念に対応しながら、増え続ける生成AIサービスの中からの選択を可能にします。

セキュアゲートウェイの強化

LLMメッシュは、セキュアなAPIゲートウェイとして機能し、ハードコードされた依存関係を解消し、アプリケーションと基盤となるサービス間のリクエストを管理、ルーティングします。

Dataikuは、大規模言語モデル(LLM)、ベクトルデータベース、高速化およびコンテナ化された計算機能の主要なプロバイダと提携しています。これには、プロダクショングレードのローカルLLMを簡単かつ効率的に提供するHugging Faceが含まれます。

SEE AVAILABLE LLM CONNECTIONS
boxes showing all the AI services with which Dataiku LLM Mesh connects
diagram showing multi-LLM strategy with the Dataiku LLM mesh

将来を見据えた生成AI 戦略 (ロックインの回避)

生成AIを搭載したアプリケーションは、現在最高のモデルの上に構築すべきなのでしょうか? それとも、より正確で、パワフルで、ユースケースに適した新しいモデルが登場するまで、もう少し我慢すべきでしょうか?Dataikuなら、選ぶ必要はありません。 マルチLLM戦略により、コスト、パフォーマンス、プライバシー、セキュリティー、規制要件などのトレードオフのバランスを取ることができます。 LLMメッシュは、市場で最も包括的で不可知論的なLLMゲートウェイであり、生成AIのトッププレーヤーと提携し、何千ものLLM(サービスまたは自己管理の両方)に安全にアクセスできます。

CHS company logo
Dataikuなしではできなかったことですが、5つの異なるLLMモデルを比較したところ、我々の特定のユースケースにおいて、1つのモデルが他のモデルを健康的な差で上回り続けていることがわかりました。 どのLLMでも、すべてのユースケースに適しているというわけではありません。

コストガードで生成AIの支出を抑える

コストガードでLLM使用状況の最新データを分析。

誰がどのモデルやサービスをどのような目的で使用したかを完全に監査可能なログで記録することで、コストの追跡や社内での再請求が可能になります。

DIG DEEPER ON COST GUARD
man sitting at desk with computer screen opening showing Dataiku Cost Guard with LLM Guard Services cost monitoring dashboards
screenshot showing Dataiku Safe Guard as part of the Dataiku LLM Mesh

Dataikuセーフガードで運用リスクを軽減

個人情報や不適切なコンテンツのスクリーニングに関しては、LLMメッシュは、Dataiku Safe Guardを経由して、機密情報の要求と応答を評価することができます。これには、個人を特定できる情報(PII)、有害なコンテンツ、または禁止用語の検出が含まれます。

LLMメッシュは、LLM APIにリクエストを送信する前に、この機密情報を再編集したり、リクエストを完全にブロックしたり、管理者に警告を発したりします。

規制要件への対応

LLMの使用を承認し、文書化し、体系化することは、規制への対応に向けた重要なステップです。

Dataiku LLMレジストリを使用して、どのモデルをどのようなユースケースに使用すべきか(または使用すべきでないか)を合理化するだけでなく、モデルのドキュメントを常に最新の状態に保ってください。

Dataikuのガバナンスについて詳細はこちら
screenshot showing how organizations can keep model documentation up to date with Dataiku LLM Registry
Dataiku LLMメッシュにより、管理された監査可能な方法でLLMを利用することができます。そのため、データサイエンティストが使用するモデルが法的観点から検証されていることを確認できます。

— Data Science Lead at an Energy Company

screenshot showing The LLM Mesh monitors the round-trip performance for LLM services and providers

大規模なパフォーマンスの監視

LLMメッシュは、LLMサービスとプロバイダーのラウンドトリップパフォーマンスを監視します。これにより、問題を診断し、アプリケーションのニーズとSLAに基づいて最適なサービスを選択できます。

さらに、一般的なクエリーに対するレスポンスをキャッシュすることで、レスポンスを再生成する必要性を回避し、コスト削減とパフォーマンス向上の両方を実現します。

生成AIアプリケーションを素早く(そして安全に)構築する

Dataikuは、LLMメッシュだけでなく、企業全体のビルダーが生成AIアプリケーションを実用化するために必要なすべてのツールを、高速かつコードフリーで提供します。

ユニバーサルAIプラットフォームは、生成AIアプリケーションを大規模に作成するために必要なすべてを提供します:

  • LLMを使用したテキストレシピ。テキストの要約や分類などの一般的なタスクを簡単に実行できます。
  • プロンプトスタジオ:最適なAIプロンプトを設計、テスト、運用するためのツール。
  • 検索拡張生成(RAG)のネイティブサポート、Dataiku Answers、プリビルドのチャットフロントエンドを含む。
  • コードフリーとコードフレンドリーなモデルの微調整。
  • 一般的なアプリケーションのための事前に構築されたユースケースである生成的なAIを搭載したDataikuソリューション。
生成AIビルダーツールについてはこちら
screenshots showing Dataiku's GenAI builder components including LLM powered text recipes, code-free RAG

Contact Us

Interested in learning more about the Dataiku LLM Mesh or our other GenAI capabilities? Let's talk.