Одной из новинок iPadOS 14 стала Scribble — функция автоматической оцифровки рукописного ввода, сделанного фирменным стилусом Apple Pencil. Главный по разработке ПО в Apple Крейг Федериги раскрыл кое-какие нюансы реализации этой функции:

Суть Scribble — это машинное обучение, замешанное на огромном массиве накопленных данных: «Мы набрали людей по всему миру, вручили им стилусы и попросили перейти на рукописный ввод — писать быстро, писать медленно, писать под углом и так далее. Тысячи вариантов! Это ведь не просто взять и сосканировать, а потом распознать написанное — нет, для инженера Apple статичных примеров уже недостаточно, нам важно понимать штрихи и направление их движения, чтобы на ходу предугадывать, что именно пишется от руки».

Примечательно, что все вычисления при этом отдаются на откуп локальным ресурсам — типичный для Apple подход к реализации машиного обучения: «всё должно происходить в режиме реального времени, прямо сейчас и притом на устройстве, которое вы держите в руках».