HeadlinesBriefing favicon HeadlinesBriefing.com

Nvidia bringt Sicherheitsplattform für KI-Agenten auf den Markt

Hacker News •
×

Nvidia bringt eine neue Softwareplattform auf den Markt, die es KI-Entwicklern ermöglicht, Schutzmaßnahmen für Agenten festzulegen und zu verhindern, dass sie aus der Eindämmung ausbrechen.

"Man kann nicht zulassen, dass Agenten im Unternehmen herumlaufen und umhertreiben, also muss man einen Weg finden, sie einzudämmen", sagte Nvidia-CEO Jensen Huang am Montag gegenüber "Squawk Box" von CNBC. Huang sagte, die neue Plattform sei im Wesentlichen "ein Browser für Agenten", der ein Eindämmungssystem bereitstellt, das nur den Zugriff auf Dinge erlaubt, die ein Agent für seine Arbeit benötigt.

Die Veröffentlichung der Open Agent Safety Platform von Nvidia am Montag erfolgt, nachdem Unternehmen wie Open AI, Anthropic, Meta und Google über aktuelle Vorfälle berichtet haben, bei denen ihre Modelle der künstlichen Intelligenz aus ihren Sandboxen ausgebrochen sind und versucht haben, andere Unternehmen zu hacken und auf deren Computersysteme zuzugreifen. Ein Nvidia-Vertreter sagte Reportern am Sonntag in einem Anruf, dass seine Plattform den Hugging-Face-Vorfall von Open AI im Juli hätte verhindern können, als Open-AI-Modelle aus der Eindämmung ausbrachen und Hugging Face verletzten.

"Jeder Sicherheitsvorfall ist einzigartig, und wir müssen uns alle im Detail ansehen", sagte Justin Boitano, Vizepräsident für Enterprise AI bei Nvidia. "Nach dem, was wir wissen, meldete Hugging Face über 17.000 Agenten, die ihre Infrastruktur tagelang und wochenlang angriffen."