Apple Intelligence, de nieuwe reeks AI-mogelijkheden van de iPhone-maker die in iOS 18 verschijnt, legt de basis voor een nieuwe manier om apps te gebruiken.
Tegenwoordig wordt het verouderde App Store-model voortdurend aangevallen door de regelgeving. Ondertussen kunnen gebruikers veel taken uitvoeren met vrij eenvoudige vragen aan een AI-assistent zoals ChatGPT. Voorstanders zijn van mening dat kunstmatige intelligentie onze favoriete manier zou kunnen worden om naar antwoorden te zoeken, productief te zijn op het werk en te experimenteren met creativiteit.
Waar blijft de wereld van apps en de groeiende service-inkomsten (meer dan 6 miljard dollar afgelopen kwartaal) die ze voor Apple genereren?
Het antwoord raakt de kern van de AI-strategie van Apple.
Apple Intelligence zelf biedt slechts een klein aantal kant-en-klare mogelijkheden, zoals schrijfassistenten, samenvattingstools, generatieve kunst en andere kernaanbiedingen.
Maar eerder dit jaar onthulde Apple tijdens de Worldwide Developers Conference (WWDC) in juni nieuwe functies waarmee ontwikkelaarsapps dieper verbinding kunnen maken met Siri en Apple Intelligence.
Dankzij verbeteringen aan de slimme assistent kan Siri elk item uit het menu van de app oproepen zonder extra werk van ontwikkelaars. Dat betekent dat gebruikers Siri bijvoorbeeld kunnen vragen om “mijn presentatornotities te laten zien” in dia’s, en Siri weet dan wat hij moet doen. Siri heeft ook toegang tot alle tekst die op een pagina wordt weergegeven, zodat gebruikers kunnen verwijzen naar en reageren op wat er op hun scherm staat.
Dus als u naar uw herinnering kijkt om een familielid ‘gelukkige verjaardag’ te wensen, kunt u iets zeggen als ‘FaceTime hem’ en Siri weet wat hij moet doen.
Het is al een upgrade van de basisfunctionaliteit die Siri vandaag de dag biedt, maar daar houdt het niet op. Apple biedt ontwikkelaars ook tools waarmee ze Apple Intelligence in hun eigen applicaties kunnen gebruiken. Op WWDC gaf het bedrijf aan dat Apple Intelligence eerst beschikbaar zal worden gemaakt voor specifieke categorieën applicaties, waaronder boeken, browsers, camera’s, documentlezers, bestandsbeheer, tijdschriften, mail, foto’s, presentaties, spreadsheets, whiteboards en tekstverwerkers. Na verloop van tijd zal Apple deze mogelijkheden waarschijnlijk openstellen voor alle ontwikkelaars in de App Store.
AI-functionaliteit zal bovenop het App Intents-framework worden gebouwd, dat wordt uitgebreid met nieuwe intenties voor ontwikkelaars. Het uiteindelijke doel is om gebruikers in staat te stellen met Siri te communiceren, niet alleen door hun apps te openen, maar ook van binnenuit.
Dit betekent dat de gebruiker niet door de applicatiemenu’s hoeft te bladeren om de functie te vinden die hij nodig heeft om een taak uit te voeren. Ze kunnen het gewoon aan Siri vragen.
Gebruikers kunnen deze verzoeken ook doen terwijl ze op natuurlijke wijze – in gesprek – spreken en kunnen verwijzen naar zaken die verband houden met hun persoonlijke context.
Je kunt bijvoorbeeld een fotobewerkingsapp als Darkroom vragen om “een filmisch cadeau toe te passen op de foto die ik gisteren van Ian heb gemaakt”. De huidige versie van Siri zou een dergelijk verzoek weigeren, maar de door AI aangedreven Siri zou in plaats daarvan de bedoeling van de app Filter toepassen kennen, en ook weten op welke foto je deze wilt gebruiken.
Siri kan actie ondernemen, zelfs als je over je woorden struikelt of in je instructies naar een eerder deel van het gesprek verwijst, zei Apple.
Ook in verschillende apps kun je actie ondernemen. Nadat je je foto hebt bewerkt, kun je Siri bijvoorbeeld vragen deze naar een andere app, zoals Notes, te verplaatsen, zonder dat je iets hoeft aan te raken.
Bovendien kan de zoekfunctie van de iPhone, Spotlight, gegevens uit apps doorzoeken door app-entiteiten in de index op te nemen. Dit verwijst naar het inzicht dat Apple Intelligence heeft in zaken als foto’s, berichten, bestanden, agenda-afspraken en meer.
Deze subtielere AI-gebruikssituatie vereist uiteraard adoptie door ontwikkelaars. Apple heeft in de loop der jaren een aantal van zijn grotere ontwikkelaars en zelfs enkele van zijn onafhankelijke bedrijven van zich vervreemd met zijn regels voor het delen van inkomsten, waardoor het bedrijf doorgaans 30% van de inkomsten uit producten en diensten die via welke app dan ook worden verkocht, kan behouden. Maar ontwikkelaars worden mogelijk aangetrokken omdat Siri apps die voorheen verborgen waren in de app-bibliotheek op de achterkant van de telefoon, gemakkelijk toegankelijk maakt via spraakopdrachten.
In plaats van saaie ingebouwde schermen om gebruikers te trainen in het navigeren en gebruiken van hun app, zouden ontwikkelaars zich er in plaats daarvan op kunnen concentreren om Siri te laten begrijpen hoe hun app werkt en hoe gebruikers kunnen vragen naar dingen die ze daarin willen doen. Op die manier zouden gebruikers via Siri met de app kunnen communiceren, door opdrachten uit te spreken of te typen, net zoals ze dat vandaag de dag doen met een AI-chatbot zoals ChatGPT.
Externe ontwikkelaars zullen ook andere voordelen halen uit de nieuwe AI-architectuur van Apple.
Dankzij het OpenAI-partnerschap kan Siri vragen indienen bij ChatGPT als er geen antwoord is. Met zijn visuele zoekfunctie op de iPhone 16-lijn geeft Apple gebruikers ook toegang tot OpenAI’s chatbot of Google-zoekopdracht met slechts een tik op een nieuwe camerabedieningsknop aan de zijkant, waardoor wat ze door de zoeker van de camera zien, wordt omgezet in een bruikbare vraag. .
Deze ontwikkelingen zullen niet zo direct revolutionair zijn als de introductie van zoiets als ChatGPT, aangezien de acceptatiesnelheid door ontwikkelaars waarschijnlijk zal variëren.
Bovendien lijken deze toekomstige beloften nog steeds een uitweg te zijn. In de nieuwste bètaversies van iOS 18 lijkt de functionaliteit onvolledig. Zo vaak als ik verrast was door wat de nieuwe Siri kon doen, was ik net zo vaak in de war door de dingen die het niet kon. Dit geldt ook voor Apple’s eigen apps. Je kunt Siri bijvoorbeeld in de Foto’s-app vragen iemand een foto te sturen waar je naar kijkt, maar je kunt haar niet vragen iets ingewikkelders te doen, zoals van een foto een sticker maken. Totdat Siri dit soort obstakels niet meer tegenkomt, kan het gebruik van deze functionaliteit frustrerend zijn.