ByteDance entraîne un modèle d'IA titanesque
Posté : mar. 11 août 2026 07:28
ByteDance entraîne un modèle d'IA titanesque
ByteDance développe un nouveau modèle d'IA avec jusqu'à 10 000 milliards de paramètres. Un projet ambitieux pour rivaliser directement avec des modèles avancés comme Mythos d'Anthropic.
Le géant chinois ByteDance est en train d'entraîner un modèle d'IA avec un nombre de paramètres pouvant atteindre 10 000 milliards. Cette information, rapportée par le Financial Times, positionne la maison mère de TikTok comme un concurrent direct des leaders mondiaux de l'IA.
Pour Mythos 5, le modèle le plus avancé d'Anthropic, l'estimation est d'environ 8 000 milliards de paramètres (et 5 000 milliards de paramètres pour Fable 5). Le modèle de ByteDance est actuellement en phase de pré-entraînement, une étape qui pourrait durer de trois à six mois.
Quelle est la stratégie de ByteDance ?
ByteDance a opté pour une approche de développement indépendant. Le fondateur, Zhang Yiming, a récemment réitéré sa conviction que seule cette méthode permettra de créer un modèle surpassant la concurrence, même si cela implique un développement initial plus lent.
ByteDance refuse notamment la distillation de modèle, une technique qui consiste à entraîner un petit modèle en copiant les connaissances d'un plus grand. La stratégie est portée par l'équipe Seed, dirigée par l'ancien scientifique de Google DeepMind, Wu Yonghui.
Forte de 2 000 membres, cette équipe bénéficie d'investissements massifs dans les centres de données et la recherche, ByteDance ayant intensifié ses efforts en IA plus que tout autre géant technologique chinois ces trois dernières années. Une ambition est aussi de développer ses propres puces dédiées à l'IA.
Quelques points de comparaison
Avec ses 10 000 milliards de paramètres, ce projet surpasse largement les autres modèles chinois connus. Il serait plus de trois fois plus grand que Kimi K3 de Moonshot AI (2 800 milliards de paramètres) et bien au-delà du Qwen3.8-Max d'Alibaba (2 400 milliards de paramètres).
Cependant, le nombre de paramètres n'est pas le seul indicateur de la performance d'un modèle. L'architecture et la qualité des données d'entraînement sont tout aussi cruciales.
La comparaison directe avec les modèles américains reste difficile, parce que des entreprises comme OpenAI ou Anthropic ne divulguent pas officiellement ces chiffres.
ByteDance est-il un nouvel acteur dans l'IA ?
Bien que discret sur ses modèles les plus puissants, ByteDance n'en est pas à son coup d'essai. L'entreprise a déjà fait parler d'elle avec ses modèles de génération de médias, notamment SeeDance 2.5, capable de créer des vidéos réalistes de 30 secondes.
En Chine, son chatbot Doubao est l'application d'IA la plus populaire, avec plus de 300 millions d'utilisateurs actifs mensuels.
merci à GNT
ByteDance développe un nouveau modèle d'IA avec jusqu'à 10 000 milliards de paramètres. Un projet ambitieux pour rivaliser directement avec des modèles avancés comme Mythos d'Anthropic.
Le géant chinois ByteDance est en train d'entraîner un modèle d'IA avec un nombre de paramètres pouvant atteindre 10 000 milliards. Cette information, rapportée par le Financial Times, positionne la maison mère de TikTok comme un concurrent direct des leaders mondiaux de l'IA.Pour Mythos 5, le modèle le plus avancé d'Anthropic, l'estimation est d'environ 8 000 milliards de paramètres (et 5 000 milliards de paramètres pour Fable 5). Le modèle de ByteDance est actuellement en phase de pré-entraînement, une étape qui pourrait durer de trois à six mois.
Quelle est la stratégie de ByteDance ?
ByteDance a opté pour une approche de développement indépendant. Le fondateur, Zhang Yiming, a récemment réitéré sa conviction que seule cette méthode permettra de créer un modèle surpassant la concurrence, même si cela implique un développement initial plus lent.
ByteDance refuse notamment la distillation de modèle, une technique qui consiste à entraîner un petit modèle en copiant les connaissances d'un plus grand. La stratégie est portée par l'équipe Seed, dirigée par l'ancien scientifique de Google DeepMind, Wu Yonghui.
Forte de 2 000 membres, cette équipe bénéficie d'investissements massifs dans les centres de données et la recherche, ByteDance ayant intensifié ses efforts en IA plus que tout autre géant technologique chinois ces trois dernières années. Une ambition est aussi de développer ses propres puces dédiées à l'IA.
Quelques points de comparaison
Avec ses 10 000 milliards de paramètres, ce projet surpasse largement les autres modèles chinois connus. Il serait plus de trois fois plus grand que Kimi K3 de Moonshot AI (2 800 milliards de paramètres) et bien au-delà du Qwen3.8-Max d'Alibaba (2 400 milliards de paramètres).
Cependant, le nombre de paramètres n'est pas le seul indicateur de la performance d'un modèle. L'architecture et la qualité des données d'entraînement sont tout aussi cruciales.
La comparaison directe avec les modèles américains reste difficile, parce que des entreprises comme OpenAI ou Anthropic ne divulguent pas officiellement ces chiffres.
ByteDance est-il un nouvel acteur dans l'IA ?
Bien que discret sur ses modèles les plus puissants, ByteDance n'en est pas à son coup d'essai. L'entreprise a déjà fait parler d'elle avec ses modèles de génération de médias, notamment SeeDance 2.5, capable de créer des vidéos réalistes de 30 secondes.
En Chine, son chatbot Doubao est l'application d'IA la plus populaire, avec plus de 300 millions d'utilisateurs actifs mensuels.merci à GNT