overview
Was ist ExecuTorch?
ExecuTorch ist eine von Meta entwickelte On-Device-KI-Bereitstellungsplattform, die es Entwicklern und Ingenieuren ermöglicht, PyTorch-Modelle auf dem Gerät bereitzustellen. Sie ermöglicht eine effiziente Inferenz über verschiedene Edge-Formfaktoren hinweg, einschließlich mobiler, eingebetteter und anderer Edge-Geräte, und nutzt dabei das PyTorch-Ökosystem für die Modellausführung. Die Plattform begegnet Herausforderungen, die der On-Device-KI eigen sind, wie vielfältige Hardware, kritische Leistungsanforderungen, geringe oder keine Internetverbindung und Echtzeit-Verarbeitungsbedürfnisse. Sie konzentriert sich auf Portabilität, Produktivität und Leistung in ressourcenbeschränkten Umgebungen, in denen Cloud-Konnektivität aufgrund von Latenz-, Datenschutz- oder Kostenbedenken begrenzt oder unpraktisch sein könnte. ExecuTorch unterstützt die Bereitstellung von quantisierten Modellen und bietet Funktionen für den Offline-Betrieb, wobei es sich in das umfassendere PyTorch-Framework für On-Device-KI-Anwendungen integriert.