"IA — notícias de 2026-09-02"
Fontes
LLM quantization guide: How to do it, and how it helps
Red Hat Developer · 2026-09-02 Guia prático de Cedric Clyburn sobre como reduzir footprint de memória de LLMs com quantização para inference em produção. Detalha esquemas FP8/INT8/INT4, impacto por camada (QKV, FFN) e uso de LLM Compressor para compressão sem perda crítica, com exemplo Llama 4 Scout 109B de BF16 para 1 GPU. Contexto: modelos dobram a cada ano enquanto VRAM não acompanha. Abrir fonte
llama.cpp b10754 — OpenCL corrige leituras fora de limites em kernels Adreno
GitHub ggml-org/llama.cpp · 2026-09-02 Corrige out-of-bounds em kernels de imagem OpenCL para GPUs Adreno móveis. Trava fetch row do decode GEMV q4_K em grid com padding e impõe contrato de tiling para GEMMs KQ/KQV, movendo decisão de split para dispatch. Melhora inferência quantizada em dispositivos móveis com q4_K. Abrir fonte
llama.cpp b10759 — KleidiAI evita init de buffer type no dispatch
GitHub ggml-org/llama.cpp · 2026-09-02 Evita inicialização desnecessária de buffer type KleidiAI durante dispatch, reduzindo overhead em caminho ARM otimizado. Correção focada em backend ggml para inferência eficiente em hardware móvel/edge. Prerelease publicado em 2026-09-02T10:22:15Z. Abrir fonte
llama.cpp b10760 — mtmd corrige Qwen3-TTS 0.6B
GitHub ggml-org/llama.cpp · 2026-09-02 Corrige carregamento do Qwen3-TTS 0.6B tornando proj_in do code predictor opcional, já que talker e predictor compartilham hidden size na variante 0.6B. Ajuste em mtmd (multimodal) para suporte correto a modelo TTS multimodal. Publicado em 2026-09-02T11:14:51Z. Abrir fonte
llama.cpp b10762 — mtmd adiciona suporte DeepSeek-V4-Flash-Vision-Exp
GitHub ggml-org/llama.cpp · 2026-09-02 Adiciona suporte multimodal para DeepSeek-V4-Flash-Vision-Exp no pipeline mtmd, incluindo tratamento de token counts min/max via CLI. Expande cobertura de modelos vision-LLM para inferência local com ggml. Publicado em 2026-09-02T18:37:20Z. Abrir fonte
llama.cpp b10763 — preserve_reasoning ativado por padrão em server/common
GitHub ggml-org/llama.cpp · 2026-09-02 Ativa por padrão o kwarg preserve_reasoning e registra seu estado efetivo no server e common, preservando conteúdo de reasoning no histórico de chat. Viabiliza conversas multi-turn que reutilizam raciocínio prévio com flag --reasoning-preserve. Publicado em 2026-09-02T19:02:44Z. Abrir fonte
llama.cpp b10764 — ggml-cuda remove variáveis não usadas
GitHub ggml-org/llama.cpp · 2026-09-02 Limpeza em backend ggml-cuda removendo variáveis não utilizadas, mantendo paridade de kernels CUDA/HIP sem alteração funcional. Contribuição assinada por Adrien Gallouët (Hugging Face). Publicado em 2026-09-02T19:56:21Z. Abrir fonte
llama.cpp b10766 — model suporta visão para DeepSeek V4 corretamente
GitHub ggml-org/llama.cpp · 2026-09-02 Corrige suporte a input vision para DeepSeek V4 no carregamento de modelo, garantindo roteamento correto de tensores visuais no pipeline multimodal. Ajuste nits incluso. Publicado em 2026-09-02T20:33:26Z. Abrir fonte
llama.cpp b10767 — atualiza ROCm para 10.0.0
GitHub ggml-org/llama.cpp · 2026-09-02 Atualiza stack ROCm para release 10.0.0, alinhando suporte a GPUs AMD MI350X/MI355X e melhorias de kernel HIP. Relevante para serving com vLLM/LMCache em ROCm. Publicado em 2026-09-02T22:59:12Z. Abrir fonte
llama.cpp b10769 — Metal corrige query de memória em baixa memória
GitHub ggml-org/llama.cpp · 2026-09-02 Corrige consulta de memória disponível no backend Metal sob condições de baixa memória em macOS/iOS, evitando falhas de alocação. Co-autoria de Georgi Gerganov. Publicado em 2026-09-02T23:37:38Z. Abrir fonte
llama.cpp b10770 — Metal adiciona tunings FA-vec para M3
GitHub ggml-org/llama.cpp · 2026-09-02 Adiciona tabelas de tuning FlashAttention vetorizado (FA-vec) calibradas para Apple M3, estendendo otimizações de atenção vetorizada além de M2/A18 Pro. Melhora throughput de inference quantizada em Apple Silicon de nova geração. Publicado em 2026-09-03T00:00:36Z (2026-09-02 21:00 BRT). Abrir fonte
llama.cpp b10771 — mtmd adiciona mtmd_tokenize_from_parts()
GitHub ggml-org/llama.cpp · 2026-09-02 Introduz API mtmd_tokenize_from_parts() e a utiliza no mtmd-cli, movendo add_special para nível de chamada. Facilita tokenização multimodal por partes para harnesses que compõem prompts com imagem/áudio. Publicado em 2026-09-03T00:24:45Z (2026-09-02 21:24 BRT). Abrir fonte
llama.cpp b10772 — ggml-hexagon adiciona suporte F16 para ops unárias
GitHub ggml-org/llama.cpp · 2026-09-02 Estende backend HTP Hexagon com suporte F16 para operações unárias, adicionando ABS sobre NORM/RMS_NORM/L2_NORM/SCALE/CLAMP existentes. Amplia inferência quantizada em DSPs Qualcomm para execução local eficiente. Publicado em 2026-09-03T00:48:22Z (2026-09-02 21:48 BRT). Abrir fonte
llama.cpp b10773 — server aceita data: URLs para input_video e input_audio
GitHub ggml-org/llama.cpp · 2026-09-02 Servidor de inferência passa a aceitar data: URLs para input_video e input_audio, permitindo envio inline de mídia sem upload separado. Simplifica harnesses multimodais e testes locais. Publicado em 2026-09-03T01:25:03Z (2026-09-02 22:25 BRT). Abrir fonte
llama.cpp b10774 — finetune corrige modo sem KV cache
GitHub ggml-org/llama.cpp · 2026-09-02 Corrige treinamento/finetune em modo sem KV cache, ajustando caminho de treinamento sugerido por @ggerganov. Relevante para pipelines de adaptação local com memória reduzida. Publicado em 2026-09-03T01:52:31Z (2026-09-02 22:52 BRT). Abrir fonte
llama.cpp b10775 — mtmd corrige preproc idefics3
GitHub ggml-org/llama.cpp · 2026-09-02 Corrige pré-processamento idefics3 no pipeline mtmd, alinhando tratamento de imagem para modelos Idefics3. Ajuste pontual para fidelidade multimodal. Publicado em 2026-09-03T02:16:38Z (2026-09-02 23:16 BRT). Abrir fonte
Post-Training Language Models for Gold-Medal Performance in Coding Competitions
arXiv cs.LG · 2026-09-02 Pipeline completo com curadoria de 22k problemas, traces sintéticos, SFT e RL treina Nemotron-3-Nano-CC (30B-A3B) e Ultra-CC (550B-A55B). Apresenta GenCorrect, estratégia de test-time compute iterativa que gera, avalia e refina soluções. Em IOI 2026, sob mesmas restrições de humanos, atinge 535.4/600 superando gold 361.12 e top humano 498.27 — primeiro sistema a superar maior pontuador humano em IOI. Abrir fonte
UE5M3 FP4 Block Scaling for Stable Language Model Pretraining
arXiv cs.LG · 2026-09-02 Propõe parear payload E2M1 FP4 com escalas de bloco unsigned E5M3 (ue) de alcance mais amplo, com scaling periódico e stochastic rounding seletivo em gradientes backward. Pretreina Nemotron-H 8B por ~190B tokens superando receita Transformer Engine Nv com menor loss final e valid loss em inferência quantizada, sem RHT e sem isenção BF16 no bloco final. Ablação mostra +21.2% throughput de tokens no model-body ao remover RHT+BF16 juntos. Abrir fonte
Graph Machine: Towards Better Pretraining via Edges
arXiv cs.LG · 2026-09-02 Introduz Graph Machine (GM), arquitetura que mantém estado O(n) com roteamento esparso dinâmico via edges como ponteiros atualizados diferenciavelmente por mecanismo de referência. Substitui 75% das camadas densas Transformer em Qwen3-0.6B e pretreina do zero com 15.7B tokens. Com apenas 2–4 tokens de 4096 recuperados por head em cada camada esparsa, loss degrada pouco e com 4 tokens melhora marginalmente — indicando escalabilidade para contexto longo com custo sublinear. Abrir fonte
Repo-To-Skill: Distilling GitHub Repositories Into AI4AI Skills
arXiv cs.AI · 2026-09-02 Agentes de pesquisa ML combinam backbone com harness de planejamento/execução, mas falta operational knowledge — saber fazer funcionar. Repo-To-Skill destila repositórios GitHub em skills AI4AI reutilizáveis, transferindo know-how de domínio para agentes. Mitiga lacuna entre conhecer método e operacionalizá-lo, relevante para harnesses de agentes auto-evolutivos. Abrir fonte
SafeEvolve: Harness-Policy Co-Evolution from Agent Experience for Safety Alignment
arXiv cs.AI · 2026-09-02 Desempenho de agentes LLM é moldado conjuntamente por modelo base e harness. Abordagens isoladas de atualização de harness ou otimização de política falham em fechar lacuna de segurança em respostas e trajetórias multi-step. SafeEvolve propõe co-evolução harness-política a partir de experiência do agente, alinhando execução segura sem sacrificar capacidade. Expõe risco de harnesses com geração irrestrita de skills. Abrir fonte
EarlyEval: Cheaper Agent Evaluation via Early Outcome Prediction
arXiv cs.CL · 2026-09-02 Avaliar agentes frontier custa centenas a milhares de dólares por passagem. Destilação de benchmarks reduz tarefas mas mantém custo por execução. EarlyEval prevê desfecho cedo durante execução, interrompendo trajetórias com alta confiança de falha/sucesso para cortar custo sem reamostragem completa. Reduz gasto iterativo em desenvolvimento agêntico mantendo correlação de ranking. Abrir fonte
Incremental Pooled LLM Evaluation for Cost-Effective Retrieval Model Selection
arXiv cs.IR · 2026-09-02 Seleção de modelo de retrieval para RAG exige julgamentos de relevância caros. Estuda pooled LLM evaluation onde LLM julga união de documentos recuperados pelo pool atual de candidatos, expandindo pool incrementalmente quando novos sistemas chegam. Mostra como reutilizar julgamentos mantém confiabilidade comparativa com custo marginal baixo, essencial para harnesses de avaliação de RAG em produção. Abrir fonte
CORAL: An LLM-Native Harness for Production Recommender Systems
arXiv cs.CL · 2026-09-02 Sistemas de recomendação em produção exigem otimização contínua de retrieval, ranking e serving à medida que conteúdo e comportamento mudam. CORAL propõe harness LLM-native que automatiza testes de mudanças via experimentação offline conduzida por LLM, reduzindo dependência de experimentos online lentos. Traz paradigma de harness contínuo para recomendação com LLMs. Abrir fonte
Language Models Can Control Their Own Attention
arXiv cs.CL · 2026-09-02 Modelos gastam grande parte da atenção em poucos tokens mas leem todo KV cache para encontrá-los. Abordagens com proxy pré-selecionam tokens relevantes com custo extra. Mostra que LMs podem controlar própria atenção de forma endógena, mitigando custo de escanear 1M tokens a cada token gerado. Reduz leitura de KV em layer global sem proxy externo, relevante para serving de contexto longo. Abrir fonte
Discriminative World Models for Web Agents
arXiv cs.AI · 2026-09-02 Web agents amostram ações candidatas, predizem estados resultantes e ranqueiam com PRM/ranker, mas world models treinados via next-state supervision geram snapshots fixos pouco discriminativos. Introduz predicted-state matching onde representação predita deve distinguir estado verdadeiro de alternativas, treinado em dataset ramificado do WebArena Go-Browse. Supera supervisão padrão em matching e ranking PRM, melhorando taxa de sucesso end-to-end em WebArena-Lite. Abrir fonte
From Reweighting to Rewriting: Unlocking the Intervention Effects of Influential Samples in Training Data Attribution
arXiv cs.CL · 2026-09-02 Influence functions estimam mudança comportamental sob reweighting infinitesimal, mas exemplos selecionados via IF mostram vantagem limitada sobre aleatório com intervenções por peso. Demonstra que reescrever conteúdo de amostras influentes (não apenas reponderar) desbloqueia efeitos de intervenção maiores. Implicação para fine-tuning e curadoria de dados: editar amostras influentes é mais eficaz que apenas reweighting. Abrir fonte
Nota de cobertura: varredura em 10 idiomas (pt, en, it, es, fr, de, ru, zh, ko, ja) com consultas nativas para harnesses, skills, agentes, lm-eval, vLLM, llama.cpp, fine-tuning, quantização, inference e tokenizers. GitHub Releases API confirmou 15 tags de ggml-org/llama.cpp em D (janela BRT 2026-09-02 00:00–2026-09-03 00:00 = 2026-09-02 03:00–2026-09-03 03:00 UTC) todas curadas acima; ausência de release em D para vLLM (última v0.11.0 em 2026-08-26) e lm-evaluation-harness. arXiv via export.arxiv.org totalizou 111 anúncios em cs.LG e 50 em cs.CL em 2026-09-02; 11 foram curados como representativos de arquitetura, quantização, fine-tuning, skills e harnesses — demais fora do escopo estrito de engenharia de LLM ou sobreposição temática. Hugging Face Hub Daily Papers de 2026-09-02 retornou StudentSim (tutor) fora de escopo harness/inference. Lacuna: nenhum modelo novo ou tokenizer com release datada em D em Hugging Face; vLLM sem publicação em D.