Codec Flow (CODEC)

Rang #2294

Codec Flow (CODEC) est une plateforme d’opérateurs dédiée aux Vision-Language Actions (VLAs), permettant aux systèmes d’IA de voir, d’interpréter et d’exécuter des tâches sur des écrans ou dans des environnements robotiques. La proposition combine l’exécution de calcul pour des charges exigeantes et des outils pour construire des agents.

Vision, raisonnement et action avec des VLAs

Sur la base des Vision-Language Actions, Codec Flow structure la capacité de voir et de comprendre le contexte, en le transformant en actions dans le monde numérique. L’objectif est d’opérer de manière cohérente sur différentes surfaces, telles que les desktops et les navigateurs, ainsi que dans des scénarios avec des robots.

Fabric : couche d’exécution multi-cloud

L’un des composants de la plateforme est Fabric, une couche d’exécution multi-cloud conçue pour des workloads intensifs en GPU ou en calcul. Fabric cherche à optimiser l’allocation en évaluant la capacité et les prix chez les fournisseurs connectés et en dirigeant l’exécution vers le nœud au coût le plus bas qui réponde aux exigences définies.

Operator Kit (optr) pour des agents modulaires

Codec Flow développe également Operator Kit (optr), une boîte à outils légère pour créer des agents qui opèrent sur des desktops, des navigateurs, des simulations et des robots. optr offre des utilitaires composables pour organiser les actions, les états, les épisodes et la sécurité, avec une architecture modulaire afin de maintenir d’autres composants connectables.

Cadre pour des agents dans des environnements variés

Ensemble, Fabric et optr composent un framework pour soutenir le développement et le déploiement d’agents dans des environnements numériques et physiques. Cela permet d’appliquer la technologie à la fois à des flux d’exécution et au comportement de l’agent dans différents contextes.