Download am Donnerstag. Rückfallmuster und automatisierte Entscheidungen sind seit ChatGPT, AI und KI bekannter geworden. Apple spricht auch eher von Machine Learning (ML) und von Language Learning Model (LLM) als von künstlicher Intelligenz, der ein Laie Eigenschaften menschlicher Intelligenz zuschreibt. Im zurückliegenden Jahr gab es auch von Apple einige Neuerungen in den Bereichen ML und LLM, die teils Bestandteil neuer Produkte und etwa den Prozessoren sind, teils aber auch im Schatten der Neuheiten verborgen blieben. Gut also, dass jetzt die Zeit ist, auf derartige Entwicklungen hinzuweisen.
Ohne großes Aufsehen veröffentlichten Forscher von Apple und der Columbia University im Oktober 2023 ein quelloffenes multimodales Language Learning Model (LLM) namens Ferret. Diese LLM kann beliebige Formen in einem Bild erkennen und beschreiben.
Vor zwei Monaten fand die Veröffentlichung, die den Code und seinen Stellenwert für Forschungszwecke enthielt, keine große Beachtung. Das könnte sich jetzt ändern. Denn zum einen stehen alternative Open-Source-Modelle von Mistral und etwa auch das Googles Gemini-Modell für Pixel Pro und schließlich auch für Android bereit. Dadurch wird vermehrt über das Potenzial lokaler LLMs für den Betrieb kleiner Geräte gesprochen.
Denn mit Ferret wäre auch Apple in der Lage, das LLM auf dem iPhone laufen zu lassen und nicht als zentralisierte Anwendung in der Cloud. Dazu veröffentlicht Apple zwei neue Forschungspapiere, in denen neue Techniken für 3D-Avatare und Rückschlüsse auf effiziente Sprachmodell vorgestellt wurden. Die Fortschritte wurden als potenziell eindringlicheres visuelles Erlebnis und als Möglichkeit zur Ausführung komplexer KI-Systeme auf Verbrauchergeräten wie dem iPhone und dem iPad gefeiert.
Das freche Frettchen Ferret hat auf jeden Fall das Zeug dazu, Siri auf dem iPhone zu ergänzen und mit Blick auf Apple Vision Pro bestimmte 3D-Erfahrungen und räumliche Abbildungen überhaupt erst ermöglichen.
Holt es Euch im Download: github.com/apple/ml-ferret.
Kommentare sind geschlossen.