DeepSeek disponibiliza código-fonte aberto do TileKernels, biblioteca de kernels de GPU para treinamento e inferência de modelos em larga escala

Mensagem do Gate News, 23 de abril — A DeepSeek disponibilizou o código-fonte aberto do TileKernels sob a licença MIT, uma biblioteca de kernels de GPU escrita em TileLang para treinamento e inferência de modelos de linguagem em larga escala. O TileLang é uma linguagem de domínio desenvolvida pela equipe tile-ai para expressar kernels de GPU de alto desempenho em Python. A DeepSeek afirmou que a maioria dos kernels da biblioteca já se aproximou dos limites de desempenho do hardware em densidade de computação e largura de banda de memória, com partes já implantadas em operações internas de treinamento e inferência.

A biblioteca compreende seis categorias de kernels: MoE (mistura de especialistas) com gating e roteamento, incluindo seleção de especialistas Top-k, mapeamento de token para especialista e expandir/reduzir fundidos com normalização de pesos; quantização que suporta formatos FP8, FP4 e E5M6 com quantização por token, por bloco e por canal, incluindo operações fundidas de SwiGLU+quantização; transposição em lote; gating Engram com propagação direta/reversa de RMSNorm fundida e redução de gradiente de pesos; Manifold HyperConnection com normalização Sinkhorn e split/aplicar mistos; e interfaces de autograd de alto nível que encapsulam kernels de baixo nível em camadas treináveis.

Engram e Manifold HyperConnection são componentes proprietários da arquitetura do modelo da DeepSeek, com detalhes de implementação divulgados publicamente pela primeira vez. A biblioteca exige GPUs das arquiteturas NVIDIA SM90 ou SM100 (H100/H200 ou série Blackwell), CUDA Toolkit 13.1 ou superior, e PyTorch 2.10 ou superior.

Aviso: As informações nesta página podem ser provenientes de terceiros e não representam as opiniões ou pontos de vista da Gate. O conteúdo exibido nesta página é apenas para referência e não constitui aconselhamento financeiro, de investimento ou jurídico. A Gate não garante a exatidão ou integridade das informações e não será responsável por quaisquer perdas decorrentes do uso dessas informações. Os investimentos em ativos virtuais apresentam altos riscos e estão sujeitos a uma volatilidade de preços significativa. Você pode perder todo o capital investido. Por favor, compreenda completamente os riscos envolvidos e tome decisões prudentes com base em sua própria situação financeira e tolerância ao risco. Para mais detalhes, consulte o Aviso Legal.

Related Articles

Succinct Labs Lança App de iPhone ZCAM Usando Criptografia para Combater Mídia Gerada por IA

Mensagem do Gate News, 24 de abril — A Succinct Labs, apoiada pela Paradigm, revelou o ZCAM na quinta-feira, um aplicativo para iPhone que usa criptografia para fazer o fingerprint de fotos e vídeos, a fim de combater mídia gerada e adulterada por IA. O app assina fotos e vídeos no momento da captura, produzindo um registro à prova de adulteração

GateNews1h atrás

A Pi Network lança a estrutura de tokens PiRC1 e proíbe a emissão de tokens por projetos sem aplicações reais.

A Pi Network lançou em 22 de abril o framework de design de tokens PiRC1, como parte da composição da atualização Protocol V22. As regras centrais do PiRC1 são: somente projetos que já tenham aplicativos executáveis no ecossistema da Pi e que atendam a necessidades reais de usuários têm qualificação para emitir tokens. A receita dos tokens não é destinada à equipe do projeto, mas flui para um pool permanente de liquidez, ancorado na Pi Coin, para impedir comportamentos de fraude e fuga.

MarketWhisper1h atrás

Frax se Une à Ação de Apoio DeFi United para Aave, para Propor um Plano de Governança para o Incidente de rsETH

Mensagem do Gate News, 24 de abril — A Frax Finance anunciou no X que, como parceira da Aave V4, está em comunicação direta com a Aave para tratar do incidente de rsETH. Embora a Frax não tenha exposição direta a riscos, ela

GateNews2h atrás

A CoW DAO propõe compensar as vítimas de sequestro do domínio cow.fi, com até 100% de reembolso do prejuízo

CoW DAO em 23 de abril publicou uma proposta de compensação (CIP) no fórum de governança, sugerindo a criação de um programa de subsídios discricionários para fornecer aos usuários vítimas do incidente de sequestro do domínio cow.fi em 14 de abril uma compensação de até 100% dos prejuízos. O incidente teria causado uma perda estimada de aproximadamente US$ 1,2 milhão em USDC aos usuários; a CoW DAO enfatizou que a compensação tem caráter voluntário e especial, não representando reconhecimento de qualquer responsabilidade legal.

MarketWhisper2h atrás

Fundador do Telegram: taxas da TON caem para 0.0005 dólares, rumo a tarifas zero

O fundador do Telegram, Pavel Durov, publicou em 23 de abril no X um post anunciando que as taxas de transação da rede TON cairão 6 vezes dentro de uma semana, para 0.00039 TON por transação (aproximadamente 0.0005 dólar). A taxa será fixa e não será afetada pela carga da rede. Durov também informou que, após a redução das taxas, a maior parte das transações seguirá ainda mais para um modelo de taxa zero totalmente gratuito, sem comissão.

MarketWhisper2h atrás

CoW DAO Propõe Programa Discricionário de Subsídios para Compensar Vítimas de Sequestro de Domínio

Mensagem do Gate News, 24 de abril — A CoW DAO propôs a criação de um programa discricionário de subsídios para compensar usuários que sofreram perdas com o incidente de sequestro do domínio cow.fi em 14 de abril. O programa fornecerá até 100% de reembolso das perdas por meio de uma alocação única do fundo de reserva da defesa legal para vítimas elegíveis que

GateNews3h atrás
Comentário
0/400
Sem comentários