Craig Federighi 氏が iPadOS 14 の落書き機能がどのように開発されたかを説明

Scribble は iPadOS 14 の最も注目すべき新機能の 1 つであり、Apple ソフトウェア エンジニアリング担当上級副社長の Craig Federighi 氏が Popular Mechanics との新しいインタビューで、Scribble がどのように開発されたか、また iPad 上でどのように動作するかについての詳細を明らかにしました。

iPadOS 14 の Scribble を使用すると、「 Apple Pencil 」を使用してテキスト フィールドに書き込むことができ、書かれたテキストは入力されたテキストに変換されます。この機能は、電子メールの作成、カレンダーのイベントの作成、URL へのアクセス、iMessage の送信、または検索を行う必要があるときに、キーボードに切り替えることなく「Apple Pencil」を使用できることを意味します。

フェデリギ氏は Popular Mechanics に対し、Scribble の初期開発が、世界中の人々がどのように物事を書き留めるかの分析を含む広範なデータ収集に依存していたと説明しました。

「（手書きの）ストロークを理解するということになると、私たちはデータ収集を行います。私たちは世界中の人々を見つけて、彼らに何かを書いてもらいます」とAppleのソフトウェアエンジニアリング担当シニアバイスプレジデントであるクレイグ・フェデリギは言う。 「私たちは彼らに鉛筆を渡し、速く書かせたり、ゆっくり書いたり、傾けて書いたりします。このバリエーションすべてです。」

その方法論は、既存の手書きをスキャンして分析するという比較的単純なアプローチとは異なります。フェデリギ氏は、Apple の技術にとって静的なサンプルでは十分ではなかったと述べています。彼らは、それぞれの文字を形成するストロークを確認する必要がありました。 「ストロークとそのストロークがどのように書かれているかを理解できれば、何が書かれているかを明確にするために使用できます。」

ストロークベースの認識と文字および単語の予測を統合する作業はすべてデバイス上で行われ、これは機械学習と生の処理能力によって可能になると、Apple のソフトウェア責任者は説明しました。

「それは今、あなたが手に持っているデバイス上でリアルタイムで起こっていなければなりません」とフェデリギ氏は言う。 「つまり、デバイスの計算能力は、そのレベルの処理をローカルで実行できるものでなければなりません。」

Scribble と iPadOS 14 のおかげで、iPad はほぼ完全にタッチとツールで使用でき、入力する必要はほとんどありません。手書きを好む人のために、「Scribble」はエクスペリエンスを向上させるだけのツールを紹介します。上の実践ビデオで Scribble の動作を確認してください。