Blog

Todos os artigos

LLMs — GPT, BERT e Como Funcionam
AI Programming with Python

LLMs — GPT, BERT e Como Funcionam

BERT lê nos dois sentidos e entende; GPT lê num só e gera. O que o pré-treinamento deixa guardado, e os três graus de adaptação até o LoRA.

Mecanismo de Atenção e Arquitetura Transformer
AI Programming with Python

Mecanismo de Atenção e Arquitetura Transformer

Query, Key e Value, o divisor que impede o softmax de saturar, o encoding que injeta ordem, e as três famílias que saíram do Transformer.

Programação em Shiny
Dashboards com R

Programação em Shiny

Módulos com namespace próprio, shinyjs, a ponte JS↔R nos dois sentidos e o assíncrono que impede a tarefa longa de travar a interface.

Otimização de Hiperparâmetros
Machine Learning

Otimização de Hiperparâmetros

Grid, busca aleatória, bayesiana e Hyperband — e por que o best_score_ da busca nunca deve ser reportado como desempenho esperado.

Word Embeddings e Representação de Texto
AI Programming with Python

Word Embeddings e Representação de Texto

Do One-Hot ao embedding contextual: por que TF-IDF pondera, o que o Word2Vec aprende, e a diferença entre vetor estático e vetor por contexto.