AR-Brillen mit multimodalen KI-Netzwerken werden vom Pokémon GO-Entwickler finanziert

Brilliant Labs stellt seine neue Augmented-Reality-Brille vor: Frame

In einer Woche, in der Gadget-Enthusiasten auf der ganzen Welt von Vision Pro begeistert sind, versucht ein mutiges junges Start-up, eine Nische für sein Augmented-Reality-Gerät zu erobern, das eine völlig andere Form als das von Apple hat. Heute kündigte das Startup Brilliant Labs aus Singapur sein neues Produkt Frame an, eine leichte Augmented-Reality-Brille, die von einem multimodalen KI-Assistenten namens Noa angetrieben wird. Die Brille hat die Aufmerksamkeit und Investition von John Hanke, CEO von Niantic, der Augmented-Reality-Plattform hinter Spielen wie Pokémon GO, erregt. Brilliant Labs lehnte es ab, die Höhe der von Hanke erhaltenen Finanzierung offenzulegen.

In einer von TechCrunch angesehenen Videodemo bat einer der Gründer von Brilliant Labs Noa, sich per Stimme vorzustellen. Nach etwa drei Sekunden generierte der Agent eine Textantwort und projizierte sie auf die Linsen. Zusätzlich zu Sprachbefehlen ist Noa dank der Handvoll integrierter KI-Modelle in der Lage, visuelle Verarbeitung, Bilderzeugung und Übersetzung durchzuführen: die Konversationssuchmaschine Perplexity AI; das Text-Bild-Modell „Stable Diffusion“ der Firma Stability AI; Das neueste Textgenerierungsmodell von OpenAI, GPT4; und das Whisper-Spracherkennungssystem. Rahmenobjektive haben eine Auflösung von 640 x 400 zur Darstellung von Videos und Fotos.

Mit diesen Funktionen kann ein Benutzer, der in einem Einkaufszentrum einkauft, Noa bitten, die Online-Preise eines Paars Schuhe, das er sich beispielsweise über Frame ansieht, zu überprüfen. „Die Zukunft der Mensch-KI-Interaktion wird in innovativen tragbaren Geräten zum Leben erweckt, und ich freue mich sehr, die Echtzeit-Reaktions-Engine von Perplexity in Brilliant Labs Frames integrieren zu können“, sagte Aravind Srinivas, CEO und Gründer von Perplexity. in einer Pressemitteilung.

Offene und innovative Brillen

Die Frage ist, ob Frame so reaktionsfähig ist, dass die von der KI generierten Antworten nützlich sind. Die Bluetooth-fähigen Geräte von Brilliant Labs sind heute auf ein Smartphone angewiesen, um auf verschiedene KI-Modelle zuzugreifen. Letztendlich wollen die Gründer jedoch auf das Host-Telefon verzichten und leichte Machine-Learning-Modelle direkt in die Brille integrieren.

Frame wurde nach dem ersten Produkt von Brilliant Labs, Monocle, auf den Markt gebracht, einem AR-Gerät mit einer Linse, das aufgrund seiner Programmierbarkeit und Erschwinglichkeit eine treue Anhängerschaft in der Open-Source-Community anzog. Eine Gruppe von Stanford-Studenten verwandelte das Gerät sogar in einen Dating-Assistenten, der in Echtzeit Vorschläge machte, was sie ihrem Date sagen sollten.

Frame bleibt wie sein Vorgänger Open Source, was bedeutet, dass Entwickler Zugriff auf Ressourcen wie lebendige Dokumentation, eine Open-Source-Codebasis und Hardware-Schaltpläne haben. Sie können auch die Einstellungen der von Noa unterstützten KI-Modelle anpassen.

Eine Hommage an die großen Persönlichkeiten der Geschichte

Im Gegensatz zum sperrigen Vision Pro ist Frame für den täglichen Gebrauch konzipiert und wird mit verschreibungspflichtigen Gläsern geliefert. Mit einem Gewicht von 39 Gramm und dicken runden Nylon-Kunststoffrahmen ist die Brille nach Angaben des Unternehmens eine „Hommage an die revolutionären Innovationen und Ideen historischer Persönlichkeiten wie John Lennon, Steve Jobs und Gandhi“. » Frame kann ab heute vorbestellt werden und kostet 349 US-Dollar, also den gleichen Preis wie Monocle. Die Auslieferung der Geräte beginnt im April.

Seit seiner Gründung im Jahr 2019 ist es Brilliant Labs gelungen, eine namhafte Gruppe von Angel-Investoren anzuziehen. Im vergangenen Juni berichteten wir über die 3-Millionen-Dollar-Investition von Brendan Iribe, Mitbegründer von Oculus; Adam Cheyer, Mitbegründer von Siri; Eric Migicovsky, Gründer von Pebble und ehemaliger Partner von Y Combinator; und andere. Hankes neue Kapitalzuführung erhöht die Gesamtfinanzierung des Unternehmens auf 6 Millionen US-Dollar.

Quelle: www.bing.com