Napredak uključen u novi Apple operativni sistem primjer je posla koji se neprestano radi u laboratorijama i uredima u Cupertinu. Nove tehnologije integrirane u ekosustav ili razvoj novih alata za pristupačnost primjeri su važnosti koju Apple pridaje korisniku i tehnologiji. Jedna od tih novina je Škrabanje, funkcija koja omogućava napišite Apple Pencil bilo gdje na ekranu u iPadOS-u i odmah ga pretvorite u tekst. To je način prepoznavanja teksta lokalno, sigurno i efikasno, kao što je Craig Federighi prokomentirao u jednom od svojih posljednjih intervjua.
Lokalno, sigurno i efikasno: ovo je Scribble na iPadOS 14
iPadOS 14 sa sobom je donio čitav niz novih funkcija za Apple Pencil. Jedan od njih bio je poznati Škrabanje ili 'rukopis'. Način za razumijevanje rukopisa olovkom na ekranu tableta. Pomoću Apple Pencil možemo napiši rukom i odmah da se pisanje pretvori u tekst bilo gdje na iPadOS-u. Pored toga, uključeni su i pokreti poput precrtavanja riječi da bi se taj element izbrisao, odabirom zaokruživanjem skupa riječi ili razdvajanjem vertikalnom crtom.
Za sve je ova funkcija neophodna Appleov terenski rad i modeliranje kako bi se utvrdilo koji je obrazac pisanja ljudi. Zahvaljujući umjetnoj inteligenciji, mašinskom učenju i hiljadama ljudi koji su sudjelovali u ovom projektu, Apple je uspio pokrenuti model koji je integriran na lokalnom nivou a to omogućava transkripciju onoga što korisnik napiše Apple Pencilom. Dakle objasniti Craig Federighi, Appleov potpredsjednik softvera, u intervjuu za Popular Mechanics:
Kada je riječ o razumijevanju poteza (rukopisnog teksta), mi prikupljamo podatke. Upoznajemo ljude iz cijelog svijeta i tjeramo ih da pišu. Dajemo im Apple Pencil i tjeramo ih da pišu brzo, pišu sporo, pišu nagnuto. Sve ove varijacije.
La varijacija rukopisa presudno je da ova funkcija bude efikasna. Svaka osoba je drugačija, a njihovo pisanje još više. Eto zašto stvoriti model sposoban za analizu pisanja A znati kako predvidjeti pokrete ključno je za Scribbleov uspjeh. Uz to, Craig osigurava da se sav taj model učita na nivou softvera na iPadu i ni u jednom trenutku se ne traži nijedna informacija s bilo kojim vanjskim serverom. Ovom izjavom Apple osigurava da izvještava da Scribble koristi interne algoritme koji koriste korisniku, a da istovremeno održavaju sigurnost i snagu sistema poput iPadOS-a.