Napredak uključen u Appleove nove operativne sustave ilustrira posao koji se neprestano radi u laboratorijima i uredima u Cupertinu. Nove tehnologije integrirane u ekosustav ili razvoj novih alata za pristupačnost primjeri su važnosti koju Apple pridaje korisniku i tehnologiji. Jedna od tih novina je Škrabotine, funkcija koja dopušta napišite Apple Pencil bilo gdje na zaslonu u iPadOS-u i odmah ga pretvorite u tekst. To je način prepoznavanja teksta lokalno, sigurno i učinkovito, kao što je Craig Federighi komentirao u jednom od svojih posljednjih intervjua.
Lokalno, sigurno i učinkovito: ovo je Scribble na iPadOS 14
iPadOS 14 sa sobom je donio čitav niz novih značajki za Apple Pencil. Jedan od njih bio je poznati Škrabanje ili 'rukopis'. Način za razumijevanje rukopisa olovkom na zaslonu tableta. S Apple Pencilom možemo napiši rukom i odmah da se pisanje pretvori u tekst bilo gdje na iPadOS-u. Uz to su uključene i geste poput precrtavanja riječi a posteriori da bi se taj element izbrisao, odabirom zaokruživanjem skupa riječi ili razdvajanjem okomitom crtom.
Za sve je ova funkcija neophodna Appleov terenski rad i modeliranje kako bi se utvrdilo kakav je obrazac pisanja ljudi. Zahvaljujući umjetnoj inteligenciji, strojnom učenju i tisućama ljudi koji su sudjelovali u ovom projektu, Apple je uspio pokrenuti model koji je integriran na lokalnoj razini a to omogućuje transkripciju onoga što korisnik napiše Apple Pencilom. Tako objašnjava Craig Federighi, Appleov potpredsjednik softvera, u intervjuu za Popular Mechanics:
Kada je riječ o razumijevanju poteza (rukopisnog teksta), vršimo prikupljanje podataka. Upoznajemo ljude iz cijelog svijeta i tjeramo ih da pišu stvari. Dajemo im jabučnu olovku i tjeramo ih da brzo pišu, pišu sporo, pišu nagnuto. Sve ove varijacije.
La varijacija rukopisa presudno je da ova značajka bude učinkovita. Svaka je osoba drugačija, a njihovo pisanje još je više. Iz tog razloga stvoriti model sposoban za analizu pisanja A znati kako predvidjeti pokrete ključno je za Scribbleov uspjeh. Uz to, Craig osigurava da se sav taj model učita na razini softvera na iPadu i ni u jednom trenutku se ne traži nijedna informacija s bilo kojim vanjskim poslužiteljem. Ovom izjavom Apple osigurava da izvijesti da Scribble koristi interne algoritme koji su korisni za korisnika zadržavajući pritom sigurnost i snagu sustava poput iPadOS-a.