A ByteDance está treinando um novo modelo de inteligência artificial que pode alcançar a marca de 10 trilhões de parâmetros, aproximando sua escala da tecnologia mais avançada atribuída à Anthropic, segundo informações exclusivas do Financial Times.
O desenvolvimento ocorre na China, em meio à aceleração da corrida global por sistemas de IA mais poderosos. Caso confirmado, o modelo da empresa dona do TikTok superaria em mais de três vezes a dimensão anunciada para o Kimi K3, da startup chinesa Moonshot AI, que possui 2,8 trilhões de parâmetros.
A iniciativa faz parte da estratégia de empresas chinesas de ampliar sua competitividade diante de concorrentes dos Estados Unidos, buscando criar modelos maiores sem tornar sua operação excessivamente cara.
Novo sistema ainda está em fase inicial de treinamento
A ByteDance iniciou a etapa de pré-treinamento do modelo, processo que costuma levar entre três e seis meses antes das fases posteriores de ajuste e eventual lançamento ao público.
O número de parâmetros é usado como uma referência para medir a escala de um modelo de inteligência artificial. Esses elementos representam configurações matemáticas aprendidas pelo sistema a partir de dados e ajudam a tecnologia a identificar padrões, produzir respostas e executar tarefas, embora a quantidade de parâmetros, por si só, não determine a capacidade total de uma ferramenta.
