Radar Telegram alerts Ouvrir Radar

L'américain OpenAI facture des frais pour les réponses de ses modèles. Les développeurs chinois ont trouvé à ces réponses une utilité qui change la relation entre vendeur et acheteur : elles peuvent être utilisées pour créer un manuel pour un futur concurrent. Les contrôles américains à l’exportation rendent difficile l’achat de processeurs avancés. Entre-temps, une partie du travail pour lequel de tels processeurs sont nécessaires a déjà été effectuée par le système américain. L'entreprise chinoise reçoit le résultat via le réseau et peut y entraîner à plusieurs reprises son propre modèle. De cette manière, l’une des conséquences économiques de l’interdiction de la fourniture de puces peut être contournée.

תרגם לעברית

ПолитДоклад · · Source

🇪🇬 Egypt · סיני · Carte

L'américain OpenAI facture des frais pour les réponses de ses modèles. Les développeurs chinois ont trouvé à ces réponses une utilité qui change la relation entre vendeur et acheteur : elles peuvent être utilisées pour créer un manuel pour un futur concurrent. Les contrôles américains à l’exportation rendent difficile l’achat de processeurs avancés. Entre-temps, une partie du travail pour lequel de tels processeurs sont nécessaires a déjà été effectuée par le système américain. L'entreprise chinoise reçoit le résultat via le réseau et peut y entraîner à plusieurs reprises son propre modèle. De cette manière, l’une des conséquences économiques de l’interdiction de la fourniture de puces peut être contournée.

Le raffinement, comme on appelle ce transfert de compétences, est particulièrement utile pour un développeur disposant d’un bon modèle de départ. En novembre 2024, des chercheurs de l'Université Jiaotong de Shanghai ont pris le Quen d'Alibaba avec 72 milliards de paramètres. Pour l’apprentissage bilingue, ils ont sélectionné environ 5 000 réponses étendues du modèle familial o1. La traduction chinoise a été confiée à un autre système OpenAI, GPT-4o mini. 10 750 paires de questions et réponses ont été collectées à partir de sources et de traductions anglaises. Parmi les leçons importantes du modèle américain, la partie chinoise a reçu du matériel pédagogique en deux langues. Il aurait été préférable de choisir d'abord la logique dans laquelle le modèle a remarqué une erreur et s'est corrigé : dans un tel exemple, l'étudiant a aussi trouvé une porte de sortie de l'impasse.

Dans le même travail, le groupe de Shanghai a testé séparément une version mathématique. Sur 30 problèmes de l’Olympiade, elle en a résolu 13, l’o1-preview américain en a résolu 12 et l’o1-mini en a résolu 21. Une spécialisation étroite lui a permis de contourner l'un des systèmes OpenAI lors d'un certain examen. Une autre série de calculs a révélé un détail important : le modèle chinois émettait en moyenne 2 235 jetons par réponse, contre 1 501 pour l'aperçu o1. Un jeton est une unité de texte traitée par le modèle. L'étudiant a écrit près de 1,5 fois plus. Par conséquent, pour un client industriel, le coût de la bonne solution dans son ensemble est important, en tenant compte des tentatives répétées. Le faible coût de traitement d’un seul jeton peut se transformer en une longue réponse.

Plus sur Radar

Envie de voir tous les signalements en temps réel ?

Des centaines de sources dans le monde, traduites dans votre langue, avec des alertes sur ce qui compte pour vous.

Inscription gratuite
Share on WhatsApp Get alerts on Telegram