Sichere KI-Modelle schneller bereitstellen JFrog und NVIDIA schließen Partnerschaft

Von Martin Hensel 1 min Lesedauer

Anbieter zum Thema

Der Software-Supply-Chain-Spezialist JFrog kooperiert mit NVIDIA. Im Mittelpunkt der Zusammenarbeit steht die beschleunigte Bereitstellung sicherer KI-Modelle. Dazu wird die JFrog-Plattform um NVIDIA NIM für GPU-optimierte KI-Services erweitert.

JFrog hat seine Plattform um NVIDIA NIM für GPU-optimierte KI-Services erweitert.(Bild:  Brian Penny /  Pixabay)
JFrog hat seine Plattform um NVIDIA NIM für GPU-optimierte KI-Services erweitert.
(Bild: Brian Penny / Pixabay)

Neben der Integration von NVIDIA NIM hat JFrog auch die JFrog-Artifactory-Modellregistrierung in seine Plattform implementiert. Auf diese Weise lassen sich ab sofort GPU-optimierte, vorab genehmigte KI-Modelle mit zentralisierten DevSecOps-Prozessen in einem durchgängigen Software-Lieferketten-Workflow kombinieren. Unternehmen können somit sichere Modelle für Machine Learning und große Sprachmodelle („Large Language Models“, LLMs) in kurzer Zeit in den Produktiveinsatz bringen. Dabei sorgt die JFrog-Plattform für erhöhte Transparenz, Rückverfolgbarkeit und Vertrauenswürdigkeit.

„Da Unternehmen KI-Technologie heutzutage schnell einführen, ist es unerlässlich, Praktiken zu implementieren, die ihre Effizienz und Sicherheit gewährleisten und KI verantwortungsvoll einbeziehen“, erklärt Gal Marder, Executive Vice President Strategy von JFrog. Durch die Integration von DevOps-, Sicherheits- und MLOps-Prozessen in einen durchgängigen Software-Lieferketten-Workflow mit NVIDIA NIM-Mikrodiensten können JFrog-Nutzer sicherere Modelle effizient in die Produktion bringen. „Gleichzeitig können sie ein hohes Maß an Transparenz, Rückverfolgbarkeit und Kontrolle in der gesamten Pipeline gewährleisten“, ergänzt Marder.

Funktionen im Überblick

Dank der NVIDIA-NIM-Integration lassen sich containerisierte KI-Modelle als Softwarepakete in bestehende Softwareentwicklungs-Workflows integrieren. Zudem können Unternehmen mit NIVIDIA NGC eine zentrale Quelle für alle Softwarepakete und KI-Modelle nutzen. Das Zusammenspiel der Lösungen von JFrog und NVIDIA sorgt für eine einheitliche Verwaltung, die beispielsweise eine zentralisierte Zugriffskontrolle von NIM-Mikroservice-Containern neben allen anderen Assets in JFrog Artifactory als Modellregister ermöglicht und die nahtlose Integration in bestehende DevSecOps-Workflows gestattet.

Kontinuierliches Scannen sorgt in jeder Entwicklungsphase für Sicherheit und Integrität. Dies schließt Container und Abhängigkeiten mit ein und liefert kontextbasierte Einblicke in NIM-Mikroservices mit JFrog-Prüfungs- und Nutzungsstatistiken, um die Compliance zu fördern. Laut JFrog ist auch für hohe Modell-Performance und Skalierbarkeit gesorgt, da NVIDIA-beschleunigte Recheninfrastruktur mit geringer Latenz und hohem Durchsatz zum Einsatz kommt. Kunden können zudem auf flexible Bereitstellungsoptionen zurückgreifen, einschließlich selbstgehosteter, Multi-Cloud- und Air-Gap-Varianten.

(ID:50166132)

Jetzt Newsletter abonnieren

Täglich die wichtigsten Infos zu Big Data, Analytics & AI

Mit Klick auf „Newsletter abonnieren“ erkläre ich mich mit der Verarbeitung und Nutzung meiner Daten gemäß Einwilligungserklärung (bitte aufklappen für Details) einverstanden und akzeptiere die Nutzungsbedingungen. Weitere Informationen finde ich in unserer Datenschutzerklärung. Die Einwilligungserklärung bezieht sich u. a. auf die Zusendung von redaktionellen Newslettern per E-Mail und auf den Datenabgleich zu Marketingzwecken mit ausgewählten Werbepartnern (z. B. LinkedIn, Google, Meta).

Aufklappen für Details zu Ihrer Einwilligung