Tous les concepteurs de processeurs pour smartphones ou presque ont annoncé des solutions pour intégrer une dose d'intelligence artificielle dans leur plate-forme, soit à l'aide d'un composant dédié ou NPU (Apple, Huawei...) soit en reprogrammant les puces existantes (GPU, DSP, ISP...) à cette fin (Qualcomm SnapDragon).
ARM, à l'origine de l'architecture des coeurs des CPU des processeurs mobiles et parfois des GPU, n'avait pas encore vraiment de solution dédiée à proposer sur le thème de l'intelligence artificielle embarquée.
Le Project Trillium vient combler cette lacune en proposant une plate-forme logicielle de machine learning et de détection / reconnaissance d'objet. La partie machine learning promet de fournir des performances de plus de 4,6 TOPS.
Surtout, ARM revendique la maîtrise des contraintes thermiques et l'efficacité énergétique du Project Trillium par rapport aux solutions concurrentes développées en interne en revendiquant une efficacité de plus de 3 TOPS par Watt (pour de futurs composants gravés en 7 nm), un point essentiel pour du traitement réalisé sur des appareils mobiles.
La partie détection d'objet (OD) du Project Trillium permet quant à elle d'interpréter des flux Full HD 60 fps pour identifier et suivre des personnes ou des objets, en assurant des performances très supérieures par rapport à un traitement similaire depuis un DSP.
Enfin, le Project Trillium comprend une partie logicielle consacrée aux réseaux neuronaux avec le support des grands environnements Tensorflow, Caffe et Android NN et de quoi les associer efficacement aux architectures CPU ARM Cortex et GPU ARM Mali.
Le Project Trillium doit en principe permettre de créer des puces comprenant un processeur ML (Machine Learning) et un processeur OD (Object Detection) travaillant ensemble, le second capturant par exemple des informations visuelles traitées ensuite finement par le premier pour plus d'efficacité.
ARM annonce une pré-version pour le mois d'avril et une disponibilité générale d'ici mi-2018 mais les premiers appareils mobiles intégrant une puce reposant sur le Project Trillium ne devraient pas voir le jour avant l'an prochain.
