À la suite d'une levée de fonds de 2 milliards de dollars, @MishaLaskin, PDG de @reflection_ai, sur la direction que prend l'entreprise : "Nous avons capitalisé pour obtenir la puissance de calcul nécessaire pour pré-entraîner et post-entraîner un modèle ouvert américain que nous pouvons exporter dans le reste du monde." Ils ont également constitué ce que Laskin appelle un banc de talents de laboratoire de pointe : "Nous avons une masse critique de personnes qui ont dirigé ce travail dans des laboratoires de pointe — modélisation de pré-entraînement et données, raisonnement post-entraînement, codage, RLHF — nous avons constitué des équipes à travers toute la pile." Reflection est maintenant dans la phase que chaque laboratoire de pointe sérieux doit traverser : "Nous sommes sur l'échelle de mise à l'échelle, formant méthodiquement des modèles de petits à grands, car à chaque échelle, les choses se cassent de nouvelles manières." Et Laskin trace une ligne nette entre le pré-entraînement et le post-entraînement : "Les gens parlent des courses YOLO en IA, mais cela ne fonctionne qu'en post-entraînement. Comme le dit l'un de nos membres d'équipe : vous ne pouvez pas YOLO le pré-entraînement, cela doit être extrêmement précis et méthodique." Où en sont les choses en ce moment : "Nous passons par l'échelle de mise à l'échelle maintenant. Nous voyons des résultats préliminaires passionnants, et nous allons sortir de superbes modèles l'année prochaine."