Architectures intermédiaires pour l'inférence et l'entraînement de réseaux de neurones embarqués

神经网络中的推理和介入的架构

• 批准号: RGPIN-2018-04478
• 负责人: Langlois, Pierre
• 金额: $ 3.35万
• 依托单位: École Polytechnique de Montréal
• 依托单位国家: 加拿大
• 项目类别: Discovery Grants Program - Individual
• 财政年份: 2019
• 资助国家: 加拿大
• 起止时间: 2019-01-01 至 2020-12-31
• 项目状态: 已结题
• 来源: https://www.nserc-crsng.gc.ca/ase-oro/Details-Detailles_eng.asp?id=689218
• 关键词: Architectures; interm; diaires; pour; inf

Les bonds prodigieux des cinq dernières années en apprentissage automatique pointent vers un monde où l'intelligence artificielle aura une incidence grandissante dans nos vies. Pourtant, ces réalisations impressionnantes sont souvent le résultat de longues explorations algorithmiques par des serveurs de calcul très énergivores. Compléter la révolution de l'apprentissage machine nécessitera l'accès à des dispositifs embarqués qui apprendront par eux-mêmes à partir du monde qui les entoure : téléphones intelligents, lunettes, jouets, montres, drones, robots, informatique vestimentaire et véhicules autonomes.******Il y a plusieurs choix pour l'implémentation de l'inférence et de l'apprentissage pour des réseaux de neurones. Les CPU traditionnels ne conviennent pas à la tâche dès que la charge de traitement est importante. Les GPU capitalisent sur la parallélisation des calculs. Cependant, leur efficacité énergétique laisse à désirer et les rend mal adaptés à des applications embarquées. Les circuits sur mesure (ASIC) sont les plus performants, mais ils souffrent de coûts non récurrents faramineux et de longs délais de développement. Les FPGA semblent offrir un compromis idéal : ils ont un faible coût unitaire, offrent un grand parallélisme et consomment peu de puissance par rapport aux GPU. Cependant, ils souffrent de deux problèmes principaux : (1) la productivité atteinte avec les GPU (dizaines de minutes pour implémenter un algorithme) est beaucoup plus grande que celle avec les FPGA (dizaines d'heures) et (2) la latence de reconfiguration (cycle synthèse-placement-routage) peut être excessive.******Les architectures intermédiaires (overlays) ont été proposées afin de pallier ces problèmes. Un FPGA peut être vu comme une architecture intermédiaire à grain très fin : bascules, tables de conversion (LUT) et multiplieurs. Une architecture intermédiaire à grain grossier comporte des unités de traitement plus complexes et mieux adaptées à une classe d'applications. Une architecture intermédiaire nécessite un compilateur pour porter une application vers l'architecture. Le programme de recherche proposé s'attaquera donc au problème de la conception, de l'implémentation, de la programmation et de la reconfiguration rapide d'architectures intermédiaires pour l'inférence et l'entraînement de réseaux de neurones embarqués.******Les objectifs du programme incluent le développement de nouvelles architectures intermédiaires et d'outils de conception appropriés, la proposition de nouvelles structures de calcul et d'entreposage, puis la conception de nouveaux supports matériels pour ces architectures. L'atteinte de ces objectifs facilitera le déploiement d'applications d'apprentissage machine dans des systèmes embarqués indépendants et démocratisera l'accès au développement de ces applications, qui est présentement réservé à quelques initiés hautement spécialisés.

L的聪明才智和机智巧妙地发生了错综复杂的事情，而这一切都是自动完成的。给人留下深刻印象的是，探索的算法是服务于服务的S。L的学徒机器L的学徒S的学徒配置：L的学徒有智能的，有月亮的，有飞机的，有蒙太尔的，有无人驾驶的，有机器人的，有信息的。*。传统的CPU和便利的服务是最重要的，也是最重要的。Les GPU资本化和并行化与微积分。S等人认为，这是一种新的、有效的应用程序。LES电路和测量(ASIC)Sont Les加上表演者、邮件和非流动资金法拉米诺和De Long s délais de de发展。Les现场可编程门阵列是一种折衷的解决方案：它不是一种简单的硬件设备，而是一种通用的硬件设备，它可以很好地支持GPU。(2)延迟的重新配置(循环合成-布局-布线)过度。*。联合国现场可编程门阵列与通信体系结构中间层的S Fin：Bascules，Tables de Conversion(LUT)等乘数。从建筑到建筑的过渡，再加上复杂的结构和应用，S的作品就像是一部作品。建筑中介人和编者L的建筑应用。S的《关于建筑国际概念发展的规划》、《L的实施方案》、《规划与重构的规划》、《L与L的研究报告》、《S关于神经元发展的规划》、《关于建筑国际发展与规划的规划》，以及《建筑与建筑的新概念与主张》，都是对建筑概念的支持。L的工作是帮助实现应用程序的开发，这是一台机器与系统结合的应用程序。S的工作人员是L，他负责S的应用程序开发工作，而S的工作人员则负责管理S的工作。