Recursive zeigt erstes Ergebnis seines KI-gesteuerten Forschungsprozesses mit Flint
decoder ·
Das KI-Startup Recursive hat Flint veröffentlicht, sein erstes Sprachmodell für Programmieraufgaben, das weitgehend von einem internen KI-System namens Eureka Machine entwickelt wurde. Dieser automatisierte Forschungsprozess übernahm nahezu jeden Schritt der Entwicklung, einschließlich der Vorschlagung von Ideen, des Testens von Architekturen und der Optimierung der Leistung. Flint ist ein Mixture-of-Experts-Modell mit insgesamt 40 Milliarden Parametern, wobei jedoch nur 2,5 Milliarden pro Token aktiv sind; es ist für eine schnelle lokale Ausführung auf Apple- und Nvidia-Hardware konzipiert. Das Unternehmen behauptet, dass Flint unter ähnlichen sparsamen Modellen die Coding-Benchmarks anführt und deutlich schneller läuft als dichte Modelle vergleichbarer Größe. Das Modell unterstützt Kontextfenster bis zu 512.000 Tokens und ist unter der Apache-2.0-Lizenz auf Hugging Face verfügbar. Recursive beabsichtigt, diesen Ansatz einzusetzen, um KI-Systeme zu schaffen, die zur autonomen Selbstverbesserung fähig sind, obwohl Experten darauf hinweisen, dass eine vollständige rekursive Selbstverbesserung noch nicht nachgewiesen ist. Während andere Labore wie Anthropic und OpenAI ebenfalls KI in ihren Forschungsprozessen nutzen, spielt die menschliche Aufsicht weiterhin eine entscheidende Rolle bei wichtigen Entscheidungen.
decoder