Développe de nouvelles architectures de modèles d'IA appliquant la théorie des catégories au raisonnement structuré, au lieu de mettre à l'échelle les transformeurs
Le pari
Que la théorie des catégories peut produire toute une classe de modèles surpassant les transformeurs — plus petits, interprétables, capables de réellement raisonner
2 M$ de pré-amorçage de Khosla en 2023 pour prouver l'idée, puis une série A de 33 M$ en avril 2024 (valorisation non divulguée)
George Morgan a passé quatre ans chez Tesla comme ingénieur senior de l'autopilote, débutant comme stagiaire, a conclu que la philosophie du tout-échelle était erronée, et est parti en 2022 pour fonder Symbolica
Khosla a versé 2 M$ en 2023 — « Il a livré cela, de manière très crédible » — puis a dit à Morgan de recruter les meilleurs théoriciens des catégories. Symbolica a publié son approche avec des chercheurs de Google DeepMind et s'est lancée le 9 avril 2024 avec le tour de 33 M$
Chaque grand laboratoire mettait à l'échelle des transformeurs avec des entraînements coûtant des centaines de millions ; le pari de Symbolica est que l'architecture, et non l'échelle, est le prochain levier.
La conviction du fondateur s'est forgée chez Tesla, où toujours plus d'échelle ne parvenait pas à résoudre la conduite entièrement autonome — le test de résistance le plus médiatisé de la pensée du tout-échelle.
Khosla en a fait un pari par étapes : 2 millions de dollars pour d'abord prouver les mathématiques, 33 millions seulement après que Morgan a « livré cela, de manière très crédible ».
Quand un domaine converge vers une seule recette, le pari à plus fort levier est celui de l'outsider crédible qui estime que la recette elle-même est le goulot d'étranglement.
Suites
Au moment du lancement d'avril 2024, Symbolica déclarait construire une classe de modèles plutôt qu'un modèle unique surpassant les transformeurs ; la série A finance le recrutement de théoriciens des catégories et l'avancement de l'architecture. La valorisation n'a pas été divulguée.
VÉRIFIEZ LES SOURCES