Os últimos seis meses em LLMs em cinco minutos

Os últimos seis meses em LLMs em cinco minutos


Os últimos seis meses em LLMs em cinco minutos

19 de maio de 2026

Reuni esses slides anotados de minha palestra relâmpago de cinco minutos na PyCon US 2026, usando a iteração mais recente de minha ferramenta de apresentação anotada.

Os últimos seis meses em LLMs em cinco minutos

#

Apresentei esta palestra relâmpago na PyCon US 2026, tentando resumir os últimos seis meses de desenvolvimentos em LLMs em cinco minutos.

O ponto de inflexão de novembro

#

Seis meses é um período de tempo bastante conveniente para cobrir, porque capta o que venho chamando de ponto de inflexão de novembro de 2025. Novembro foi um mês crítico nos LLMs, especialmente para codificação.

O “melhor” modelo trocou de mãos 5 vezes entre Anthropic, OpenAl e Google

#

Por um lado, o modelo supostamente “melhor” (dependendo principalmente das vibrações) mudou de mãos cinco vezes entre os três grandes fornecedores.

Gere um SVG de um pelicano andando de bicicleta

#

Como sempre, estou usando meu teste Gerar um SVG de um pelicano andando de bicicleta para ajudar a ilustrar as diferenças entre os modelos.

Por que esse teste? Porque os pelicanos são difíceis de desenhar, as bicicletas são difíceis de desenhar, os pelicanos não posso andar de bicicleta… e não há chance de qualquer laboratório de IA treinar um modelo para uma tarefa tão ridícula.

Cinco pelicanos, um para cada um dos seguintes modelos. Qualidades variadas!

#

No início de novembro, o “melhor” modelo amplamente reconhecido era o Claude Sonnet 4.5, lançado em 29 de setembro. Isso me atraiu esse pelicano.

Em novembro foi ultrapassado pelo GPT-5.1, depois pelo Gemini 3, depois pelo GPT-5.1 Codex Max, e então a Anthropic recuperou a coroa com Claude Opus 4.5.

Acho que Gemini 3 tirou o melhor pelicano deste grupo, mas pelicanos não são tudo. A maioria dos praticantes concordará que o Opus 4.5 manteve a coroa pelos próximos meses.

Os agentes de codificação ficaram bons

#

Demorou um pouco para isso ficar claro, mas a verdadeira notícia de novembro foi que os agentes de codificação conseguiram bom.

OpenAI e Anthropic passaram a maior parte de 2025 executando Reinforcement Learning from Verifiable Rewards para aumentar a qualidade do código escrito por seus modelos, especialmente quando combinados com seus chicotes de agente Codex e Claude Code.

Em Novembro os resultados deste trabalho tornaram-se evidentes. Os agentes de codificação passaram de trabalhar frequentemente para trabalhar principalmente, cruzando uma barreira de qualidade onde você poderia usá-los como um driver diário para realizar o trabalho real, sem precisar gastar a maior parte do tempo corrigindo seus erros estúpidos.

Captura de tela de "Confirmação inicial" no GitHub para steipete/Warelay, commit f6dd362, steipete de autoria em 24 de novembro de 2025 É uma cópia da licença do MIT

#

Também em novembro, isso aconteceu – o primeiro commit em um repositório obscuro (naquela época) chamado “Warelay” por um cara chamado Pete.

Dezembro/Janeiro (Um pouco de psicose LLM)

#

Durante o período de férias, de dezembro a janeiro, muitos de nós aproveitamos o intervalo para dar uma olhada nesses novos modelos e agentes de codificação e ver o que eles poderiam fazer.

Eles poderiam fazer muito! Alguns de nós ficaram um pouco entusiasmados demais. Tive meu próprio ataque de curta duração de uma forma de psicose LLM quando comecei a desenvolver projetos extremamente ambiciosos para ver até onde poderia levá-los.

playground micro-javascript Execute código JavaScript em um ambiente micro-javascript em área restrita alimentado por Pyodide var numbers = (1, 2, 3, 4, 5, 6, 7, 8, 9, 10); var duplicado = números.map(n => n * 2); console.log(‘Duplicado: "’, duplicado); var pares = números.filter(n => n % 2 === 0); console.log(‘Evens: ‘, pares); var soma = números.reduce((a, b) => a + b, @); console.log(‘Soma:"soma); Saída 27 Duplicada: (2, 4, 6, 8, 10, 12, 14, 16, 18, 20) Evens: (2, 4, 6, 8, 10) Soma: 55 Tempo de execução: 8,00 ms Sobre: ​​micro-javascript é um interpretador Python JavaScript puro com memória e limites de tempo configuráveis. Este playground roda inteiramente em seu navegador usando Pyodide (Python compilado para WebAssembly). Ver no GitHub” style=”max-width: 100%”/></p>
</div>
<div class= JavaScript rodando em Python rodando em Pyodide rodando em WebAssembly rodando em JavaScript

#

Essa demonstração do playground mostra o código JavaScript executado usando minha biblioteca micro-javascript, em Python, rodando dentro do Pyodide, rodando em WebAssembly, rodando em JavaScript, rodando em um navegador!

É muito legal! Mas alguém lá fora precisar uma implementação incompleta de JavaScript com erros, lenta e insegura em Python?

Eles não fizeram isso. Tenho alguns outros projetos daquele período de férias que desde então me aposentei silenciosamente!

Fevereiro de 2026

#

Vamos para fevereiro. Lembra daquele projeto Warelay que teve seu primeiro commit no final de novembro?

Warelay → CLAWDIS → CLAWDBOT → Clawdbot → Moltbot →🦞 OpenClaw

#

Em dezembro e janeiro, ele passou por algumas mudanças de nome… e em fevereiro estava conquistando o mundo com seu nome final, OpenClaw.

A quantidade de atenção que recebeu é surpreendente para um projeto que tinha menos de três meses.

Termo genérico: Garra

#

OpenClaw é um “assistente pessoal de IA”, e na verdade temos um termo genérico para eles, baseado em NanoClaw e ZeroClaw e similares… eles são chamados Garras.

Um aquário para sua garra

#

Os Mac Minis começaram a se esgotar no Vale do Silício, porque as pessoas os compravam para operar seus Claws.

Drew Breunig brincou comigo dizendo que isso ocorre porque eles são os novos animais de estimação digitais e um Mac Mini é o aquário perfeito para o seu Claw.

Doc Ock de Alfred Molina em Homem-Aranha 2, destruindo um trem do metrô de Nova York com suas quatro garras.

#

Minha metáfora favorita para Garras é Doc Ock, de Alfred Molina, no filme Homem-Aranha 2 de 2004. Suas garras eram alimentadas por IA e eram perfeitamente seguras, desde que nada danificasse seu chip inibidor… após o que elas se tornavam más e assumiam o controle.

Gemini 3.1 Pro Uma ilustração muito boa de um pelicano andando de bicicleta.

#

Também em fevereiro: o Gemini 3.1 Pro foi lançado e me desenhou um pelicano muito bom andando de bicicleta. Veja isso! Tem até um peixe na cesta.

Pelicano Gemini 3 Pro contrastado com Gemini 3.1 Pro, como SVGs animados

#

E então Jeff Dean do Google tuitou este vídeo de um pelicano animado andando de bicicleta, além de um sapo em um centavo e uma girafa dirigindo um carro minúsculo e um avestruz em patins e uma tartaruga dando kickflips em um skate e um bassê dirigindo uma limusine.

Então talvez os laboratórios de IA estejam prestando atenção, afinal!

Abril de 2026

#

Muitas coisas aconteceram apenas no mês passado.

Gemma 4 26B-A4B (17,99 GB) Um pelicano bastante decente andando de bicicleta, embora a bicicleta esteja um pouco deformada.

#

O Google lançou a série de modelos Gemma 4, que são os modelos abertos mais capazes que já vi de uma empresa norte-americana.

GLM-5.1 MIT, parâmetro 754B, 1,51 TB!

#

Também no mês passado, o laboratório chinês de IA GLM lançou o GLM-5.1 – um monstro de 1,5 TB de peso aberto! Este é um modelo muito eficaz… se você puder pagar o hardware para executá-lo.

#

GLM-5.1 desenhou para mim este pelicano muito competente em uma bicicleta.

A bicicleta está instável, o pelicano está flutuando.

#

… embora quando tentou animá-lo, a bicicleta ricocheteou no topo e ficou empenada.

Captura de tela de Bluesky Charles @ charles.capps.me Acho que você deveria importuná-lo com outro animal usando outro método de locomoção. Algo me diz que foi treinado para isso. Não consigo definir o que é. /s GAMBÁ DA VIRGÍNIA DO NORTE EM UMA E-SCOOTER!!

#

Charles, da Bluesky, sugeriu que eu tentasse com um gambá da Virgínia do Norte em uma E-scooter

GAMBÁ DA VIRGÍNIA DO NORTE CRUZANDO PELA COMUNIDADE DESDE O Anoitecer E uma ilustração muito legal de um gambá.

#

E fez isso! Já tentei isso em outros modelos e eles nem chegam perto. “Cruzando a comunidade desde o anoitecer” é perfeito. Também é animado.

Qwen3.6-35B-A3B é um arquivo de 20,9 GB que roda no meu laptop. Ele desenhou um pelicano melhor em uma bicicleta do que o Opus 4.7, que bagunçou o quadro da bicicleta.

Pelicano Claude Sonnet 4.5 para comparação.

#

Aqui está aquele pelicano Claude Sonnet 4.5 de setembro para comparação.

Os temas dos últimos 6 meses: Os agentes de codificação foram realmente bons. Os modelos locais superam amplamente as expectativas

#

Então esses foram os dois temas principais dos últimos seis meses. Os agentes de codificação ficaram muito bons… e os modelos disponíveis para laptop, embora muito mais fracos que o Frontier, começaram a superar enormemente as expectativas.



Source link

Postagens Similares

  • Ulubiona piątka: Queer Black YA Horror

    Karmię ją bestią Jamison Shea Martwe dziewczyny chodzą i pogrzeby są dla żywych Sami Ellis Zabranie Jake’a Livingstona Ryan Douglass Nie powinieneś dziś umrzeć Kalynn Bayron DOE Rebecca Barrow Bonus: To wszystko są powieści, ale w „Wszystkich zatopionych duszach: czarnym” znajdziesz jeszcze więcej… Kontynuuj czytanie Ulubiona piątka: Queer Black YA Horror → Source link

  • İNCELEME: Odyssey (Homer) – Oku Yaz Yanıtla

    Kızım son zamanlarda oynuyor DestansıHomeros’un müzikal uyarlaması Odysseytekrarlanıyor. Epic: The Musical (EPIC olarak stilize edilmiştir), tamamı Porto Rikolu aktör ve şarkıcı-söz yazarı Jorge Rivera-Herrans tarafından yazılan ve üretilen dokuz bölümlük bir albüm müzikalleri dizisidir (“destanlar” olarak anılır). 2022 ile 2024 yılları arasında yayınlanan bu müzik projesi, Antik Yunan destansı şiirinin baştan sona söylenmiş bir uyarlamasıdır….

  • Otwarte oprogramowanie i odpowiedzialność · Felix Geisendörfer

    Opublikowany: 7 marca 2013 r Dzisiaj przeczytałem komentarz na Githubie na temat ważnej funkcji, której brakuje w jednej z moich bibliotek open source. Nie będę do tego linkował, ale w skrócie brzmiało: „Jeśli zależy Ci na Twojej bibliotece i społeczności, musisz wdrożyć tę funkcję”. To nie były jego dokładne słowa, ale autor komentarza wyraźnie domagał…

  • Covid-19 预估更新 2020 年 8 月 23 日 – CDC 预测中包含预估

    估计感染死亡人数和死亡率 如果我们知道感染人数,并且知道感染死亡率(IFR),那么从感染人数预测死亡人数就会非常简单。然而,在整个大流行期间,我们一直在估计感染人数和 IFR,但在许多情况下做得很糟糕。各州的数字似乎也有很大差异。 IFR 约为 0.5% 我在 Medium 上的一篇文章中解释了我是如何得出这个结论的。超级快速的解释是,这个数字至少可以根据纽约州 4 月下旬进行的抗体测试,结合纽约州因 Covid-19 死亡的信息来计算出来。一旦我们知道了大概的 IFR,我们就可以引导根据死亡人数估计感染人数的方法,这有助于我们将阳性检测与感染之间的关系归零。 检测呈阳性并不等于感染 阳性检测和感染不是一回事。阳性检测是感染数量的有用指标,但它们并不相同。这个简单的概念似乎阻碍了许多所做的估计。 随着时间的推移,阳性检测与感染之间的关系一直在发生变化。在大流行初期,感染与阳性检测的比例似乎在 10:1 到 20:1 之间。现在这个比例似乎在 3:1 到 5:1 的范围内。 单纯病死率 我的估计方法的基石是跟踪 Naive CFR 的变化,作为感染与阳性检测比率的指标。 单纯病死率 计算方法是今天的死亡人数除以 14 天前的阳性检测人数。由于死亡滞后于阳性检测,因此阳性检测是未来死亡的有用先行指标。 我仍然对许多广为人知的短期死亡率估计的巨大错误感到惊讶。如果您仅采用过去 7 天的平均初始病死率 (naive CFR),并根据 14 天滞后的阳性检测结果,用它来估计未来 14 天的死亡人数,那么您可以对未来 14 天的死亡人数做出比已发布的绝大多数估计更准确的估计。 对于截至 8 月 1 日左右的估计,我使用了阳性测试百分比(阳性率)和幼稚 CFR 之间的强相关性。因为我们在报告测试数据时知道测试阳性率,所以它作为死亡率的领先指标非常有用,而且我使用最近的阳性率以及阳性测试的数量来估计近期未来的死亡率。 但自大流行开始以来,单纯病死率已大幅下降。一开始超过50%,8月初一度跌至1.4%。随着 Naive CFR…

  • RECENSION: Avgång(er) (Julian Barnes) – Läs Skriv Svara

    I ett färskt nyhetsbrev ställde Laura Hilliger frågan om varför vi läser memoarer och biografier: Varför läser du memoarer (om du ens gör det)? Jag läser biografier och memoarer delvis för att jag försöker förstå de inre liven hos människor som är kända för saker. Källa: FBT on Glistening and Gobsmacking av Laura Hilliger Jag…

Deixe um comentário

O seu endereço de email não será publicado. Campos obrigatórios marcados com *