Math Notes et Smart Script sont deux des fonctionnalités les plus impressionnantes incluses dans iPadOS 18 cette année. Dans une nouvelle interview avec Chris Lawley, Apple a fourni plus de détails sur le fonctionnement de ces fonctionnalités avec une plongée en profondeur dans certaines des technologies qui les sous-tendent.
Pour rappel, Math Notes est une nouvelle fonctionnalité d’iPadOS 18 qui vous permet de taper ou d’écrire des expressions mathématiques et de les voir résolues instantanément dans votre propre écriture.
Dans l’interview, Ty Jordan, chef de produit des expériences système d’Apple, a expliqué Math Notes et pourquoi Apple a finalement décidé d’apporter l’application Calculatrice sur iPad avec iPadOS 18 :
Lorsque nous proposons ce type d’expériences sur iPad, nous réfléchissons très profondément à la manière dont ces expériences peuvent être conçues pour les capacités uniques de l’iPad et de ses accessoires uniques comme l’Apple Pencil.
Nous aurions pu simplement apporter une calculatrice basique ou scientifique sur iPad, mais au lieu de cela, nous avons pris le temps de vraiment repenser la façon dont vous pouvez même faire des mathématiques avec Math Notes et Calculator. Cela fonctionne un peu comme par magie.
Il combine la saisie naturelle du crayon avec les étonnants modèles d’apprentissage automatique sur l’appareil qui [Jenny Chen, Apple’s engineering manager for input experiences] et ses équipes travaillent sur la puissance d’Apple Silicon. Vous écrivez donc des mathématiques comme sur un morceau de papier et, comme par magie, cela vous donne la réponse.
Jenny Chen, responsable de l’ingénierie des expériences de saisie chez Apple, a partagé plus de détails sur la façon dont vous pouvez insérer un graphique pour vos données d’un simple clic avec Math Notes :
L’une des premières choses intéressantes est de savoir comment nous pouvons reconnaître que cette équation est graphique. Ainsi, si nous avons deux variables qui ne sont pas définies, nous utilisons tout d’abord le formidable moteur de reconnaissance intégré pour nous dire : « Hé, pouvons-nous représenter cela graphiquement ? »
Et puis, pour les graphiques, cela s’appuie en réalité sur toutes les années de travail que nous avons effectuées pour l’API des graphiques Swift et ce qu’elle fournit. C’est formidable que nous l’améliorions tous les deux, mais que nous l’utilisions également dans nos propres produits. Et donc, certaines des choses amusantes qui en sont ressorties sont les animations amusantes qui rendent le tout agréable, fluide et sophistiqué.
La possibilité de parcourir le graphique afin de pouvoir voir la valeur à mesure que la valeur change le long de l’axe X.
Parallèlement, Smart Script dans iPadOS 18 est une nouvelle fonctionnalité qui vise à améliorer votre écriture manuscrite lorsque vous prenez des notes. Cette fonctionnalité lisse et redresse votre texte manuscrit pendant que vous écrivez avec l’Apple Pencil. Elle vous permet également de modifier du texte manuscrit aussi facilement que du texte dactylographié.
Jordan a expliqué comment Smart Script en apprend davantage sur vous :
Smart Script est un modèle d’apprentissage automatique intégré à l’appareil qui apprend en continu, mais qui fonctionne également très rapidement. Vous remarquerez donc que, même si vous démarrez avec un tout nouvel iPad, dès que vous commencez à écrire des mots, nous allons les peaufiner. Nous savons comment vous faciliter la tâche.
Nous aurons également un correcteur orthographique qui fonctionnera immédiatement, car nous pourrons voir ce que vous avez écrit, comme Jenny l’a dit, le comprendre et nous pourrons vous proposer ces suggestions.
Certaines fonctionnalités, comme « coller comme écriture manuscrite », s’améliorent au fil du temps, à mesure que vous écrivez davantage. Pour vraiment adapter votre style d’écriture manuscrite, il faut un ou deux paragraphes de ce style. Mais il apprendra continuellement et il est très contextuel.
Ainsi, par exemple, si vous deviez revenir à un paragraphe précédent dans lequel vous aviez une mauvaise écriture, nous allons faire correspondre l’écriture qui a été affinée à ce niveau et ne pas essayer de reproduire ce que vous aviez dans d’autres notes.
Consultez l’interview complète ci-dessous:
Envie de vous détendre un peu ? Voici un reportage très intéressant sur l’intelligence artificielle :
