grail (SN81)

Rang #1335

Le Grail (SN81) est un projet de l’écosystème Bittensor qui fonctionne comme la subnet 81. Son objectif est d’opérer au niveau du reinforcement learning pour le fine-tuning et le post-training au sein de l’écosystème Covenant AI.

Comment fonctionne le grail

La plateforme implémente le protocole GRAIL (Guaranteed Rollout Authenticity via Inference Ledger) pour permettre que les sorties du modèle pendant les rollouts soient vérifiables de manière cryptographique. Ainsi, le grail cherche à renforcer l’authenticité des résultats tout au long du processus d’entraînement.

En pratique, la subnet utilise une infrastructure de RL fine-tuning permissionless et incitée pour transformer des modèles de foundation pré-entraînés en des systèmes d’IA alignés et prêts pour le déploiement.

À quoi sert le grail

Le grail a été conçu pour l’optimisation du post-training grâce à des rollouts de reinforcement learning. Il intègre différents environnements de RL pour prendre en charge des scénarios variés d’entraînement.

Le système génère des rollouts avec une capacité d’exécution élevée grâce à ses propres algorithmes dédiés à l’optimisation après le pré-entraînement.

Technologie et limites des modèles

Le grail prend en charge des modèles allant de 8B à 70B+, permettant des applications sur différentes plages de taille de modèle. Cette flexibilité aide à répondre à divers besoins de fine-tuning au sein de la subnet 81.