米Googleは、サーバレスでの機械学習モデルを提供するVertex Predictionsの新機能として、プライベートエンドポイントの提供を8月26日(現地時間)に開始した。
Vertex Predictionsによって機械学習モデルをクラウドでホストし、REST APIを介して予測を行う際に、オンライン予測が必要な場合はモデルをエンドポイントにデプロイする必要があり、モデルをエンドポイントにデプロイすることで、物理リソースがモデルに関連付けられるので、低レイテンシで予測を提供できる。
モデルをエンドポイントにデプロイする際に、プライベートエンドポイントを作成することによって、システムのリクエスト受信時に、予測の提供にかかる時間が短縮可能になるとともに、セキュリティ面でもメリットがある。
プライベートエンドポイントに起因するオーバーヘッドは最小限であり、GKEまたはGCEでのDIYサービスとほぼ同じパフォーマンスを実現し、プライベートエンドポイントにデプロイされたモデルにおけるペイロードサイズの制限はない。
この記事は参考になりましたか?
- この記事の著者
-
CodeZine編集部(コードジンヘンシュウブ)
CodeZineは、株式会社翔泳社が運営する開発者のための情報メディアです。日々の開発に取り組むエンジニアやテクノロジーを学びたい方に向けて、プログラミングやAI活用、開発ツール、エンジニアの学びとキャリアに関する記事をお届けしています。
※プロフィールは、執筆時点、または直近の記事の寄稿時点での内容です
この記事は参考になりましたか?
この記事をシェア
