A Tencent publicou os pesos baixáveis de seu modelo principal Hy4 em 20 de novembro, acompanhando o lançamento de um novo Mapa de Sistema. Este lançamento ocorreu após o lançamento do serviço em 4 de novembro e difere dos pontos de controle anteriores do Hy4 que estavam disponíveis esta semana.
O cartão oficial do modelo descreve um sistema multimodal do tipo 'mixture-of-experts' com um núcleo de linguagem contendo 770 bilhões de parâmetros. Ao ser ativado, 49 bilhões de parâmetros são usados para cada token de texto, e a janela de contexto atinge 1.048.576 tokens. O cálculo do núcleo não inclui o codificador de visão, o adaptador e o componente de rascunho DFly2.
A Tencent forneceu aos desenvolvedores vários pontos de partida para treinamento ou implementação futuros, incluindo as instruções Hy4, Hy4-FP8 e os pontos de controle básicos do Hy4.
A Pandaily confirmou o recebimento de um pequeno intervalo de bytes de um dos shards de peso em cada um dos três repositórios. No entanto, a empresa não baixou os pontos de controle completos nem realizou inferência.
A documentação de implantação contém receitas para vLLM e SGLang usando paralelismo tensorial oito-way; estas são implementações de infraestrutura significativas, e não uma prova de que o modelo principal funciona em um laptop comum.
Os pesos utilizam a licença Tencent Hy License 1.0, e não a Apache 2.0. Condições comerciais adicionais se aplicam aos operadores que fornecem inferência remota de propósito geral ou ajuste fino a terceiros. Operadores de modelo como serviço devem obter permissão por escrito separada se sua receita bruta mundial agregada exceder US$ 50 milhões em qualquer período consecutivo de 12 meses, independentemente de o Hy4 ter gerado essa receita, ou antes de usar o modelo em um produto ou serviço com mais de 100 milhões de usuários ativos em qualquer mês civil.
A licença exclui fluxos de trabalho de usuário final com funcionalidade limitada e simples retransmissão para serviços de modelos gerenciados independentemente da sua definição de modelo como serviço. Uma exceção estreita para uso interno exige que o modelo, seus derivados ou resultados não sejam fornecidos a terceiros. Portanto, esses limites não devem ser apresentados como uma restrição abrangente para cada usuário comercial.
A Tencent também aponta para a filtragem de material de treinamento malicioso de segurança cibernética e a realização de auditorias internas de segurança por especialistas. Essas avaliações são emitidas pelo emissor e não são garantias independentes de que o modelo não pode ser usado indevidamente. Os desenvolvedores que avaliam a implantação ainda devem realizar sua própria avaliação de desempenho de tarefas, requisitos de recursos e medidas de segurança.
A mudança prática reside no acesso aos artefatos do modelo principal e nas condições que regulam seu uso, e não em um novo lançamento das capacidades anteriormente anunciadas do Hy4 em visão e computação.



