Von Andreessen Horowitz unterstütztes Vals will zum Goldstandard für KI-Benchmarking werden
techcrunch ·
Vals, ein 2024 gegründetes Startup, will das KI-Benchmarking grundlegend verändern – also jene Tests, mit denen Unternehmen die Fähigkeiten von Modellen überprüfen und deren Vorteile hervorheben –, obwohl viele etablierte Tests veraltet und manipulierbar sind. Nach einer von 8VC und Bloomberg Beta angeführten Seed-Runde nahm das Unternehmen im vergangenen Monat nach raschem Wachstum 40 Millionen US-Dollar in einer von Andreessen Horowitz angeführten Series-A-Finanzierungsrunde auf. Mitgründer Rayan Krishnan sagt, Vals halte konkrete Testmaterialien unter Verschluss und konzentriere sich darauf, ob Modelle komplexe, branchenspezifische Aufgaben etwa in den Bereichen Recht, Finanzen und Programmierung erledigen können, statt nur allgemeines Wissen zu prüfen. Das Unternehmen untersucht außerdem sowohl positive als auch schädliche mögliche Auswirkungen und befasst sich unter anderem mit rekursiver Selbstverbesserung, psychischer Gesundheit, Cybersicherheit, Biosicherheit und dem Recht des bewaffneten Konflikts. Unternehmen bezahlen für diese Bewertungen, weil sie dabei helfen können, Modelle zu diagnostizieren und zu verbessern; zudem beeinflussen die Ergebnisse zunehmend die Entscheidungen darüber, welche KI-Modelle angeschafft werden. Vals zufolge liegt der Umsatz beim Achtfachen des Vorjahresniveaus; das Team ist von acht auf 25 Personen gewachsen, plant den Umzug in ein größeres Büro und die Einstellung von 10 bis 15 weiteren Beschäftigten und hat ein Evaluierungsprogramm für Bundesbehörden gestartet. Krishnan glaubt, dass solche Benchmarks für das öffentliche Vertrauen in KI-Unternehmen, deren Nutzung, Einreichungen und Investitionsgespräche zentrale Bedeutung erlangen werden, sobald sich ihre Modelle in der Wirtschaft verbreiten.
techcrunch