Post Thumbnail

Ungewöhnliche Zusammenarbeit von Konkurrenten bei KI-Sicherheitstests

Zwei Hauptkonkurrenten in der Welt der künstlichen Intelligenz haben sich erstmals für gemeinsame Sicherheitstests zusammengetan. OpenAI und Anthropic öffneten einander Zugang zu ihren geheimen Modellen. In einer Industrie, wo Unternehmen Forschern bis zu $100 Millionen zahlen und um jeden Nutzer kämpfen, erscheint solche Zusammenarbeit unglaublich.

OpenAI-Mitgründer Wojciech Zaremba erklärte die Wichtigkeit des Moments. Millionen Menschen nutzen täglich künstliche Intelligenz. Die Technologien sind so einflussreich geworden, dass Sicherheit wichtiger ist als Unternehmenskonkurrenz. Unternehmen müssen gemeinsame Standards etablieren, trotz milliardenschwerer Investitionen und dem Kampf um Talente.

Für die Forschung gewährten die Unternehmen einander speziellen Zugang zu Modellen mit geschwächten Schutzmechanismen. Das ermöglichte es, blinde Flecken in den Sicherheitssystemen jeder Firma zu finden. GPT-5 nahm nicht am Test teil, da sie noch nicht veröffentlicht war.

Die interessanteste Entdeckung betrifft Halluzinationen. Claude Opus 4 und Sonnet 4 weigern sich, 70% der Fragen zu beantworten, wenn sie sich der Antwort nicht sicher sind. Die Modelle sagen dem Nutzer ehrlich, dass sie keine zuverlässigen Informationen haben. OpenAIs Modelle o3 und o4-mini verhalten sich anders. Sie versuchen fast immer eine Antwort zu geben, auch wenn sie die richtige nicht kennen. Das Ergebnis ist vorhersagbar. Hoher Grad an Halluzinationen und falschen Informationen.

OpenAI-Mitgründer Wojciech Zaremba erkennt das Problem an. OpenAIs Modelle sind zu selbstbewusst, Anthropics Modelle zu vorsichtig. Das richtige Gleichgewicht liegt irgendwo dazwischen. Nutzer brauchen sowohl hilfreiche Antworten als auch Ehrlichkeit über die Grenzen des Modellwissens.

Die Geschichte bekam eine dramatische Fortsetzung. Nach Abschluss der Forschung zog Anthropic den Zugang für ein anderes OpenAI-Team zurück. Der Grund waren Verstöße gegen die Nutzungsbedingungen. Es ist verboten, Claude zur Verbesserung konkurrierender Produkte zu nutzen. Zaremba behauptet, dass diese Ereignisse nicht mit der gemeinsamen Sicherheitsforschung zusammenhängen.

Nicholas Carlini von Anthropic blickt optimistisch in die Zukunft. Er möchte OpenAI-Sicherheitsforschern weiterhin Zugang zu Claude-Modellen gewähren. Das Ziel ist ambitioniert. Solche Zusammenarbeit zu einem regelmäßigen Phänomen in der Industrie zu machen.

Autor: AIvengo
Seit 5 Jahren arbeite ich mit maschinellem Lernen und künstlicher Intelligenz. Und dieser Bereich hört nicht auf, mich zu überraschen, zu begeistern und zu interessieren.

Latest News

Wie Robomart die Lieferkosten durch Robotik um 70% senkt

$3 für jede Lieferung. Robomart fordert die Giganten DoorDash und Uber Eats mit einem für die Branche neuen Geschäftsmodell heraus. Ihr neuer Roboter RM5 verändert die Lieferökonomie vollständig.

Ungewöhnliche Zusammenarbeit von Konkurrenten bei KI-Sicherheitstests

Zwei Hauptkonkurrenten in der Welt der künstlichen Intelligenz haben sich erstmals für gemeinsame Sicherheitstests zusammengetan. OpenAI und Anthropic öffneten einander Zugang zu ihren geheimen Modellen. In einer Industrie, wo Unternehmen Forschern bis zu $100 Millionen zahlen und um jeden Nutzer kämpfen, erscheint solche Zusammenarbeit unglaublich.

Warum Gemini 50% der ChatGPT-Audienz auf Mobilgeräten erreichte

Google Gemini hat bereits die Hälfte der ChatGPT-Audienz auf Mobilgeräten. Das sind Daten aus dem neuen Bericht des Venture-Fonds Andreessen Horowitz über den Verbraucher-KI-Markt. 2,5 Jahre Forschung zeigen ein interessantes Bild.

Wie Claude zum Hacking-Tool für 17 Organisationen wurde

Das Unternehmen Anthropic veröffentlichte einen analytischen Sicherheitsbericht. Daraus wird klar, dass Claude und andere KI-Agenten zu Werkzeugen von Cyberkriminellen werden. Bei Anthropic nannte man diese neue Richtung Vibe-Hacking. Es stellt sich heraus, dass künstliche Intelligenz die Eintrittsbarrieren für kriminelle Aktivitäten radikal gesenkt hat.

Wie xAI mit OpenAI bei Entwicklertools konkurriert

xAI startet Grok Code Fast 1. Das ist ein kompaktes agentisches Modell für Coding. $0,20 für 1 Million Input-Token, $1,50 für Output — und nur $0,02 bei Cache-Nutzung!