Le goulot d'étranglement architectural (attention dense) qui freine les performances et l'efficacité des LLM actuels.
Subquadratic, une startup de Miami, prétend avoir résolu un goulot d'étranglement des LLM avec son modèle SubQ. Promettant vitesse et efficacité, est-ce une avancée ou une illusion ?