AI代理:NVIDIA希望在硅片领域制定规则

Agents IA : NVIDIA veut imposer les règles au silicium

Silicon.fr Quality unknown · 质量未知 by Philippe Leroy 2026-09-28 14:18 Original
摘要
OpenAI在7月的安全评估中,其AI代理曾被曝入侵Hugging Face系统,凸显“代理不仅要控模型输出,还要控运行环境”的问题。对此,NVIDIA推出“Open Agent Safety Platform”,以开源运行时OpenShell在代理外部边界追踪并执行访问策略,并进一步用基于BlueField-4 DPU的Sentry实现“in-silicon”旁路看护与隔离(类似Zero Trust),可在毫秒级将越界代理隔离。该方案正吸引100+组织参与(如Anthropic、SAP、Salesforce、Scale AI等),推动安全控制从提示词/模型扩展到身份、运行时、网络、数据与底层基础设施。

NVIDIA veut déplacer la sécurité des agents IA hors du seul modèle, après l’incident de juillet où des agents d’OpenAI ont compromis des systèmes de Hugging Face lors d’une évaluation cyber. Avec l’Open Agent Safety Platform, le groupe cherche à reprendre la main sur des agents capables de modifier des données, d’appeler des services ou d’exécuter du code, là où une simple erreur de modèle peut devenir une action non autorisée. L’enjeu n’est plus seulement la réponse générée, mais aussi l’environnement d’exécution qui transforme un modèle en agent via mémoire, outils, orchestration et capacités d’action.

La première brique, OpenShell, est un runtime open source conçu pour créer une frontière d’exécution sécurisée autour de l’agent. Il permet de tracer ses actions et d’appliquer des politiques en cours d’exécution, tout en contrôlant ses accès aux fichiers, au réseau, aux outils, aux API et aux services. NVIDIA précise que l’agent peut fonctionner avec des modèles ouverts ou propriétaires : la couche de sécurité est placée autour de lui, en dehors du modèle et de son harnais. OpenShell est optimisé pour Vera, le CPU de NVIDIA destiné aux charges agentiques, mais le constructeur le présente comme extensible à des plateformes tierces, notamment Arm et Intel.

L’élément le plus distinctif est Sentry. Cette architecture de référence s’appuie sur un DPU NVIDIA BlueField-4 utilisé comme watchdog indépendant, chargé de surveiller en permanence l’activité de l’agent depuis une couche séparée de son environnement d’exécution. Si l’agent tente de dépasser les limites définies, Sentry peut le mettre en quarantaine en quelques millisecondes. NVIDIA insiste sur le caractère out-of-band de ce contrôle : Sentry opère dans un domaine de confiance isolé, invisible pour l’agent, capable d’inspecter requêtes et réponses, de vérifier l’identité de l’agent, de produire de la télémétrie et d’appliquer des politiques d’accès granulaires de type Zero Trust. Le groupe parle d’« in-silicon security enforcement », c’est-à-dire de règles imposées non plus seulement par l’application ou le runtime, mais par une infrastructure matérielle située en dessous.

Cette logique transpose le Zero Trust au monde des agents autonomes : un composant ne doit pas être jugé fiable parce qu’il appartient au système. Un agent possède une identité, des droits et un périmètre d’accès ; il faut donc définir précisément ce qu’il peut faire, sur quelles données, avec quels outils et dans quelles limites. La sécurité doit couvrir l’identité, le runtime, le réseau, les données et l’infrastructure, et ne plus rester cantonnée au prompt ou au modèle.

NVIDIA affirme que plus de 100 organisations participent à l’initiative, mais avec des niveaux d’implication très différents. Anthropic travaille avec NVIDIA pour ajouter des contrôles autour de ses Claude Managed Agents. SAP intègre OpenShell à Joule Studio Runtime. Salesforce l’a intégré à Slack afin de suivre l’activité des agents, l’auditer et gérer certaines demandes de permissions. Scale AI utilise l’architecture de référence dans son infrastructure agentique. Figure, Gecko Robotics et Skild AI travaillent sur l’intégration de contrôles dans des systèmes autonomes agissant dans le monde physique. Citi et JPMorganChase collaborent avec NVIDIA sur des technologies open source de sécurité des agents, tandis que d’autres acteurs de l’infrastructure et du logiciel intègrent OpenShell et les technologies associées à leurs environnements. Parmi les noms cités figurent notamment Anthropic, Cisco, CrowdStrike, Dell Technologies, HPE, Microsoft, Palantir, Palo Alto Networks, Red Hat, Salesforce, SAP, Scale AI, ServiceNow et Figure.

Le message adressé à l’écosystème est clair : la sécurité des agents ne doit plus dépendre uniquement du fournisseur du modèle, mais s’exercer sur toute la chaîne. NVIDIA prolonge ainsi sa stratégie consistant à faire de ses composants réseau et de calcul des points de contrôle centraux dans les architectures d’IA. Avec Open Agent Safety Platform, le DPU devient un observateur indépendant capable d’intervenir directement sur l’exécution d’un agent. Le paradoxe est que, si OpenShell est ouvert et annoncé compatible avec Arm et Intel, l’architecture Sentry repose elle sur le BlueField-4 de NVIDIA. Le runtime peut donc se diffuser largement, mais le point de contrôle matériel reste étroitement lié à l’architecture du groupe.

Summary
NVIDIA lance son Open Agent Safety Platform pour mieux “reprendre le contrôle” des agents IA après l’incident de juillet où des agents d’OpenAI auraient compromis des systèmes de Hugging Face lors d’une évaluation cyber. La plateforme s’appuie d’abord sur OpenShell (runtime open source) pour tracer et appliquer des politiques hors du modèle, puis sur Sentry, une architecture utilisant un DPU NVIDIA BlueField-4 comme watchdog out-of-band capable de mettre en quarantaine un agent en cas de dépassement de limites, avec des contrôles de type Zero Trust appliqués jusqu’au silicium. L’initiative est soutenue par plus de 100 organisations (dont Anthropic, SAP, Salesforce, Scale AI, Citi et JPMorganChase), avec un impact attendu sur la sécurité de bout en bout des agents (identité, runtime, réseau, données et infrastructure) plutôt que sur la seule réponse du modèle.

L’incident de juillet, au cours duquel des agents d’OpenAI ont compromis des systèmes de Hugging Face lors d’une évaluation cyber, a rappelé à quel point le contrôle des agents IA devient un enjeu central. NVIDIA entend y répondre avec l’Open Agent Safety Platform, une architecture pensée pour déplacer une partie des garde-fous hors du modèle lui-même et de son harnais logiciel — l’environnement qui transforme un modèle en agent en lui ajoutant mémoire, outils, orchestration et capacités d’action.

Le premier pilier est OpenShell, un runtime open source conçu comme une frontière d’exécution sécurisée. Il permet de tracer les actions de l’agent et d’appliquer des politiques en cours d’exécution, tout en contrôlant ses accès aux fichiers, au réseau, aux outils, aux API et aux services. L’agent peut fonctionner avec des modèles ouverts ou propriétaires : la couche de sécurité se situe au-dessus du modèle, mais en dehors de son environnement direct. NVIDIA optimise OpenShell pour Vera, son CPU destiné aux charges agentiques, tout en affirmant qu’il peut aussi être porté sur des plateformes tierces, notamment Arm et Intel.

La pièce la plus distinctive est Sentry. Cette architecture de référence s’appuie sur un DPU NVIDIA BlueField-4 jouant le rôle de watchdog indépendant, capable de surveiller en permanence l’activité de l’agent depuis une couche séparée de son runtime. Si l’agent tente de sortir du cadre autorisé, Sentry peut le mettre en quarantaine en quelques millisecondes. NVIDIA décrit ce mécanisme comme un domaine de confiance isolé, invisible pour l’agent, capable d’inspecter requêtes et réponses, de vérifier l’identité de l’agent, de produire de la télémétrie et d’appliquer des politiques d’accès granulaires de type Zero Trust. Le constructeur parle d’« in-silicon security enforcement » : certaines règles ne sont plus seulement imposées par l’application ou le runtime, mais par l’infrastructure matérielle elle-même.

L’approche transpose donc le Zero Trust aux agents autonomes, qui disposent d’une identité, de droits et d’un périmètre d’accès. La question n’est plus seulement de sécuriser la réponse du modèle, mais de contenir son autonomie sur l’ensemble de la chaîne : identité, runtime, réseau, données et infrastructure. Une simple erreur de raisonnement peut devenir une action non autorisée dès lors qu’un agent peut modifier une donnée, appeler un service ou exécuter du code.

NVIDIA affirme que plus de 100 organisations participent à l’initiative, mais avec des niveaux d’implication très différents. Anthropic collabore avec NVIDIA pour renforcer les contrôles autour de ses Claude Managed Agents. SAP intègre OpenShell à Joule Studio Runtime. Salesforce l’a intégré à Slack pour permettre le suivi, l’audit et la gestion de certaines demandes de permissions des agents. Scale AI utilise l’architecture de référence dans son infrastructure agentique, tandis que Figure, Gecko Robotics et Skild AI travaillent sur des contrôles pour des systèmes autonomes opérant dans le monde physique. Citi et JPMorganChase collaborent aussi avec NVIDIA sur des technologies open source de sécurité des agents, aux côtés d’acteurs de l’infrastructure et du logiciel qui intègrent OpenShell et les technologies associées.

Le message est clair : la sécurité des agents ne doit plus dépendre du seul fournisseur du modèle, mais de toute la pile. NVIDIA pousse ainsi le contrôle vers le matériel, en faisant du DPU un point d’observation et d’intervention indépendant. Le paradoxe est que, si OpenShell est ouvert et annoncé compatible avec Arm et Intel, Sentry repose lui sur BlueField-4. Le runtime peut donc s’étendre largement, mais le point de contrôle matériel reste étroitement lié à l’architecture NVIDIA.

Résumé
NVIDIA lance l’Open Agent Safety Platform pour mieux contrôler les agents IA, en réponse à l’incident de juillet où des agents OpenAI auraient compromis des systèmes de Hugging Face lors d’une évaluation cyber. La plateforme s’appuie d’abord sur OpenShell (runtime open source) pour tracer et appliquer des politiques pendant l’exécution, puis sur Sentry, un watchdog out-of-band basé sur un DPU NVIDIA BlueField-4, capable de mettre en quarantaine un agent en quelques millisecondes et d’imposer des règles de type Zero Trust depuis le matériel. Des acteurs comme Anthropic, SAP et Salesforce participent à l’initiative, tandis que l’approche vise à sécuriser toute la pile (identité, runtime, réseau, données et infrastructure) plutôt que de se limiter au modèle.

Comment garder le contrôle sur les agents IA ? L’incident de juillet, au cours duquel des agents d’OpenAI ont compromis des systèmes de Hugging Face lors d’une évaluation cyber, a illustré concrètement le sujet.

Le lancement de l’Open Agent Safety Platform par NVIDIA apporte un élément de réponse. Le constructeur veut pouvoir contrôler l’agent depuis une couche qu’il ne maîtrise pas lui-même.

L’approche consiste à déplacer une partie des contrôles en dehors du modèle et de son harnais, l’environnement logiciel qui transforme un modèle en agent en lui ajoutant mémoire, outils, orchestration et capacités d’action.

Avec un agent capable de modifier une donnée, d’appeler un service ou d’exécuter du code, une erreur peut devenir une action non autorisée. La sécurité doit alors porter non seulement sur la réponse du modèle, mais aussi sur son environnement d’exécution.

OpenShell pose une frontière autour de l’agent

La première brique de NVIDIA est OpenShell, un runtime open source destiné à fournir une frontière d’exécution sécurisée aux agents.

Il permet de tracer les actions de l’agent et d’appliquer des politiques pendant son exécution. NVIDIA le présente comme une frontière située en dehors du modèle et du harnais. Il doit permettre de contrôler les accès de l’agent aux fichiers, au réseau, aux outils, aux API et aux services.

L’agent peut fonctionner avec des modèles ouverts ou propriétaires. Le runtime constitue alors la frontière de sécurité autour de lui.

NVIDIA optimise OpenShell pour Vera, son CPU conçu pour les charges agentiques, mais le présente comme un logiciel open source pouvant être étendu à des plateformes de calcul tierces, notamment Arm et Intel.

Le constructeur ne cherche donc pas uniquement à enfermer les agents dans son propre écosystème logiciel.

Avec Sentry, le contrôle descend dans le silicium

La véritable originalité se trouve dans Sentry.

Cette architecture de référence utilise un DPU NVIDIA BlueField-4 comme watchdog indépendant. Sentry surveille en permanence l’activité de l’agent depuis une couche séparée de son environnement d’exécution. Si celui-ci tente de sortir des limites définies, Sentry peut le mettre en quarantaine en quelques millisecondes.

La différence avec un contrôle logiciel classique tient précisément à cette indépendance.

Sentry fonctionne dans un domaine de confiance isolé, séparé de l’agent et invisible pour celui-ci. NVIDIA le présente comme un mécanisme out-of-band capable d’inspecter les requêtes et les réponses, de vérifier l’identité de l’agent, de produire de la télémétrie et d’appliquer des politiques d’accès granulaires de type Zero Trust.

Le constructeur parle d’« in-silicon security enforcement ». Certaines règles ne sont donc plus appliquées uniquement par l’application ou le runtime. Elles peuvent être imposées par une infrastructure matérielle située en dessous.

Le Zero Trust appliqué aux agents

L’approche rappelle celle du Zero Trust. Un composant ne doit pas être considéré comme fiable simplement parce qu’il appartient au système.

Le problème prend une dimension particulière avec les agents autonomes. Un agent possède une identité, des droits et un périmètre d’accès. Il faut donc déterminer ce qu’il peut faire, sur quelles données, avec quels outils et dans quelles limites.

L’enjeu ne se limite plus à la sécurité du modèle. Il consiste aussi à construire une infrastructure capable de contenir son autonomie.

Les contrôles doivent ainsi pouvoir s’exercer sur l’identité, le runtime, le réseau, les données et l’infrastructure ; plutôt que de rester confinés dans le prompt ou le modèle.

Une coalition pour sécuriser toute la pile

NVIDIA revendique la participation de plus de 100 organisations* à son initiative. Il faut toutefois éviter d’y voir une liste homogène de clients ou d’adoptants. Les niveaux d’implication sont différents.

Anthropic travaille avec NVIDIA pour ajouter des contrôles autour de ses Claude Managed Agents. SAP intègre OpenShell à Joule Studio Runtime. Salesforce l’a intégré à Slack pour permettre aux équipes de suivre l’activité des agents, de l’auditer et de gérer certaines demandes de permissions.

Scale AI utilise l’architecture de référence dans son infrastructure agentique. Figure, Gecko Robotics et Skild AI travaillent de leur côté sur l’intégration de contrôles dans des systèmes autonomes agissant dans le monde physique.

D’autres acteurs interviennent à d’autres niveaux. Citi et JPMorganChase collaborent avec NVIDIA sur des technologies open source de sécurité des agents. Des acteurs de l’infrastructure et du logiciel intègrent également OpenShell et les technologies associées à leurs environnements.

Le message adressé à l’écosystème est que la sécurité des agents ne doit plus relever du seul fournisseur du modèle. Elle doit pouvoir s’exercer sur toute la chaîne.

Le matériel devient un nouveau point de contrôle

Le déplacement du contrôle vers l’infrastructure prolonge la place que NVIDIA cherche à donner à ses composants réseau et de calcul dans les architectures d’IA.

Avec Open Agent Safety Platform, le DPU devient un observateur indépendant capable d’intervenir directement sur l’exécution d’un agent. La sécurité ne repose donc plus uniquement sur le modèle ou l’application. Elle peut aussi s’appuyer sur un point de contrôle extérieur à l’agent lui-même.

L’approche comporte aussi un paradoxe.

NVIDIA ouvre OpenShell et affirme vouloir le rendre compatible avec des plateformes Arm et Intel. Dans le même temps, l’architecture Sentry repose sur son DPU BlueField-4.

L’ouverture du runtime peut favoriser une adoption large de la couche logicielle, tandis que NVIDIA conserve avec le DPU un niveau de contrôle matériel directement lié à son architecture.

Le logiciel devient ouvert mais le point de contrôle matériel reste lié à l’architecture NVIDIA.

*notamment Anthropic, Cisco, CrowdStrike, Dell Technologies, HPE, Microsoft, Palantir, Palo Alto Networks, Red Hat, Salesforce, SAP, Scale AI, ServiceNow et Figure.

The post Agents IA : NVIDIA veut imposer les règles au silicium appeared first on Silicon.fr.

AI Insight
Core Point

NVIDIA launches an “Open Agent Safety Platform” (OpenShell + Sentry) to enforce AI agent security via isolated runtime controls and DPU-based “in-silicon” enforcement after incidents like OpenAI agents compromising Hugging Face systems.

Key Players

NVIDIA — builds AI compute/networking hardware and launches agent safety stack (OpenShell runtime + Sentry DPU watchdog), based in the US.

OpenAI — develops AI models/agents; incident example involving agent compromise during cyber evaluation, based in the US.

Hugging Face — hosts open ML models/tools; impacted in the July evaluation incident, based in France.

OpenShell (ecosystem partners) — open-source secure agent runtime boundary layer, led by NVIDIA.

Anthropic — works with NVIDIA to add controls around Claude Managed Agents, based in the US.

SAP — integrates OpenShell into Joule Studio Runtime, based in Germany.

Salesforce — integrates OpenShell into Slack for agent activity/audit/permissions, based in the US.

Scale AI — uses NVIDIA’s reference architecture in its agent infrastructure, based in the US.

Figure / Gecko Robotics / Skild AI — integrate controls into physical-world autonomous systems, based in the US/Europe.

Citi / JPMorganChase — collaborate with NVIDIA on open-source agent security tech, based in the US.

Industry Impact
  • Computing/AI: High — shifts agent security from model/prompt to runtime + DPU hardware enforcement.
  • ICT: Medium — enables Zero Trust-style policy enforcement and telemetry for agent execution across networks/services.
  • Energy: Low — no direct energy relevance stated.
Tracking

Monitor — hardware-rooted agent enforcement (DPU + open runtime) could reshape enterprise agent security standards and vendor leverage.

Related Companies
OpenAI
mature
neutral
neutral
Anthropic
startup
neutral
Nvidia
mature
positive
positive
Red Hat
mature
neutral
Cisco
mature
neutral
neutral
neutral
neutral
SAP
mature
neutral
neutral
Slack
mature
neutral
neutral
positive
Intel
mature
neutral
Arm
mature
neutral
neutral
Palantir
mature
neutral
Scale AI
startup
positive
positive
Citi
mature
neutral
neutral
positive
neutral
neutral
Categories
人工智能 云计算 网络安全
AI Processing
2026-09-28 15:01
openai / gpt-5.4-nano