De verbeteringen in de nieuwe besturingssystemen van Apple zijn een voorbeeld van het werk dat constant wordt gedaan in de laboratoria en kantoren van Cupertino. Nieuwe technologieën die in het hele ecosysteem zijn geïntegreerd of de ontwikkeling van nieuwe toegankelijkheidstools zijn voorbeelden van het belang dat Apple hecht aan de gebruiker en aan technologie. Een van die nieuwigheden is Krabbel, een functie die het mogelijk maakt schrijf met de Apple Pencil waar dan ook op het scherm in iPadOS en zet deze direct om in tekst. Het is een manier om tekst lokaal, veilig en effectief te herkennen, zoals Craig Federighi opmerkte in een van zijn laatste interviews.
Lokaal, veilig en efficiënt: dit is Scribble op iPadOS 14
iPadOS 14 bracht een hele nieuwe stapel nieuwe functies met zich mee voor de Apple Pencil. Een van hen was de bekende Krabbel of 'handschrift'. Een manier om handschrift te begrijpen met een stylus op een tabletscherm. Met de Apple Pencil kunnen we schrijf met de hand en onmiddellijk wordt dat schrift omgezet in tekst overal op iPadOS zijn we. Daarnaast zijn er gebaren zoals het achteraf doorhalen van een woord om dat element te wissen, selecteren door een reeks woorden af te ronden of ze te scheiden door middel van een verticale lijn.
Voor al deze functie is nodig een veldwerk en modellering door Apple om te bepalen wat het schrijfpatroon van de mensen is. Dankzij kunstmatige intelligentie, machine learning en de duizenden mensen die aan dit project hebben deelgenomen, is Apple erin geslaagd om een model dat op lokaal niveau is geïntegreerd en dat maakt het mogelijk om te transcriberen wat een gebruiker schrijft met de Apple Pencil. Zo verklaart Craig Federighi, vice-president software van Apple, in een interview met Popular Mechanics:
Als het gaat om het begrijpen van de streken (van de handgeschreven tekst), doen we een gegevensverzameling. We ontmoeten mensen van over de hele wereld en laten ze dingen schrijven. We geven ze een Apple Pencil en we laten ze snel schrijven, langzaam schrijven, schuin schrijven. Al deze variatie.
La handschriftvariatie het is van cruciaal belang dat deze functie effectief is. Elke persoon is anders en hun schrijven is dat nog meer. Dat is de reden maak een model dat schrijven kan analyseren En weten hoe je bewegingen kunt voorspellen, is de sleutel tot het succes van Scribble. Bovendien zorgt Craig ervoor dat al dat model op softwareniveau wordt geladen op de iPad en er wordt op geen enkel moment informatie geraadpleegd naar een externe server. Met deze verklaring zorgt Apple ervoor te melden dat Scribble gebruik maakt van interne algoritmen die de gebruiker ten goede komen, terwijl de veiligheid en kracht van een systeem als iPadOS behouden blijft.