NVIDIAがAIエージェントのセキュリティ基盤「OpenShell」をオープンソース化 — 推論コンテナの起動時間も8分から31秒に短縮
DRANK

11月11日、NVIDIA Blogが「NVIDIA Expands Open Source Commitment With OpenShell Donation and New AI Infrastructure」と題した記事を公開した。NVIDIAがKubeCon + CloudNativeConにおいてAIエージェントのセキュリティ基盤「OpenShell」をCNCFに寄贈し、Kubernetes上でのAIインフラを強化する複数のオープンソースツールを発表したという内容だ。なかでも即座に目を引くのが、推論コンテナのコールドスタート短縮の実測値だ。ワークロードが使用可能になるまでの時間が約8分から31秒へと劇的に縮まったという数字は、Kubernetes上でGPUインフラを運用するチームにとって見逃せない。その裏側にある技術スタック全体を以下で紹介する。

by @tf_official
Related Topics: AI Containers Kubernetes