Een paar jaar geleden kwamen Alex Yu en Amit Jain samen om een bedrijf te starten waarmee mensen objecten in 3D kunnen vastleggen met hun smartphones – zonder dat er extra apparatuur nodig is. Destijds was Yu onderzoeker op het gebied van kunstmatige intelligentie bij UC Berkeley, terwijl Jain een Apple-medewerker was die de multimedia-ervaringen van Vision Pro bouwde.
Hun bedrijf, Luma, lanceerde in 2021 een smartphone-app, die snel aan populariteit won en miljoenen gebruikers trok (iets meer dan twee miljoen op het moment van publicatie). Maar nu generatieve AI-technologie de kanalen overspoelt, hopen Yu en Jain Luma te laten evolueren naar iets groters (en, met een beetje geluk, beter) dan ze oorspronkelijk hadden gedacht.
Luma heeft vandaag aangekondigd dat het een computercluster van ~3.000 Nvidia A100 GPU’s gaat gebruiken om nieuwe AI-modellen te trainen die – in de woorden van Yu – “kunnen zien en begrijpen, tonen en uitleggen, en uiteindelijk kunnen communiceren met [the] de wereld.”
De eerste fase van dit plan omvat het creëren van modellen die in staat zijn om 3D-objecten te genereren uit tekstuele beschrijvingen; Luma lanceerde eerder dit jaar zo’n model op zijn Discord-server, genaamd de Genie. Het volgende zal de ontwikkeling zijn van generatieve AI-modellen van de volgende generatie die iets doen aan wat Yu beschrijft als het ‘griezelige vallei’-probleem in de GenAI van de huidige generatie.
“Wij geloven dat multimodaliteit de sleutel is tot intelligentie. Om verder te gaan dan taalmodellen, zal de volgende ontgrendeling voortkomen uit visie”, vertelde Yu aan TechCrunch in een e-mailinterview. “[However,] AI moet veel slimmer worden om het potentieel te kunnen verwezenlijken dat de wereld erin ziet.
Laat mij dit begrijpen visie visie (excuseer de woordspeling), Luma haalde $ 43 miljoen op in een Series B-ronde met deelname van Andreessen Horowitz en andere oude en nieuwe geldschieters. Volgens een bron die bekend is met de zaak, waardeert de ronde Luma op tussen de $200 miljoen en $300 miljoen; Luma’s oorlogskas bedraagt nu ruim 70 miljoen dollar.
De huidige focus van Luma – het lanceren van een AI-model om 3D-modellen te creëren – ligt op een steeds competitievere ruimte. Er zijn platformen voor het bouwen van objecten zoals 3DFY en Scenario, maar ook startups als Hypothetic, Kaedim, Auctoria en Mirage. Stability AI heeft onlangs een zelfstandige tool voor het genereren van 3D-modellen gelanceerd, evenals een recentere onderneming, Atlas. Zelfs leiders als Autodesk en Nvidia beginnen zich in de sector te verdiepen met apps als Get3D, dat afbeeldingen omzet in 3D-modellen, en ClipForge, dat modellen genereert uit tekstbeschrijvingen.
Hoe zullen de tools van Lumia opvallen? Voornamelijk loyaliteit, zegt Yu.
“Alle huidige modellen zijn getraind op tweedimensionale beelden en wanneer hen wordt gevraagd scènes te genereren, vervormen ze ruimtes, lichamen en bewegingen”, zei hij. “Het is erg moeilijk om in de eerste paar pogingen iets samenhangends en bruikbaars te genereren, waardoor je beperkt waar je de resultaten kunt gebruiken… [We’re bringing] op de meest geavanceerde generatieve fotorealistische technologie[ies] in een intuïtieve toepassing.”
Dat is veelbelovend gezien het feit dat het nog vroeg is in de ambitieuze nieuwe routekaart van Lumi. Een verbeterde versie van Genie is vandaag gelanceerd, maar toekomstige, capabelere generatieve AI-modellen zijn nog ver weg.
Luma verspilt echter geen tijd en is van plan zijn personeelsbestand van 24 personen tegen eind volgend jaar te verdubbelen, terwijl het een servercluster consolideert dat draait op modellen met “duizenden” GPU’s. Misschien zal hij toch voorspoedig zijn; de tijd zal het leren.
“We hebben het team opgebouwd door middel van generatief AI-onderzoek, engineering, ontwerp en producten om onze visie tot leven te brengen, en we zijn van plan het tempo na deze ronde aanzienlijk te versnellen”, aldus Yu. “Met Genie werd het voor het eerst mogelijk om 3D-dingen op schaal te creëren met AI, en het groeide in slechts vier weken tot 100.000 gebruikers… [But we want to] aanzienlijk capabelere, intelligentere en bruikbare visuele modellen bouwen voor onze gebruikers.”