Pipelines de dados especializados e detecção de sinais · Em produção

AB-NODA

Onze serviços de domínio sobre dados abertos brasileiros, entre eles o MINERVA: um motor longitudinal de sinais que detecta o que está de fato mudando, não o que está sendo comentado.

  1. Problema

    Notícia mais modelo de linguagem detecta o que as pessoas estão discutindo. Estratégia precisa saber o que está mudando: patentes depositadas, artigos publicados, capacidade comprometida, normas publicadas, produção em movimento. Isso vive em fontes diferentes com contratos diferentes.

  2. Capacidade
  3. Arquitetura

    Um serviço FastAPI, um schema PostgreSQL e uma porta por domínio, sem imports entre domínios. PostGIS, pgvector e DuckDB onde cada um cabe. RabbitMQ para trabalho assíncrono. MINERVA: 29 sensores registrados (OpenAlex, EPO OPS, INPI, EIA, IRENA, ANP, JODI, SODIR, Baker Hughes, doze feeds de imprensa setorial) produzem duas classes de evidência: documentos por um único contrato de extração com LLM, indicadores diferenciados deterministicamente sem modelo. Sinais são observações datadas, atribuídas e tipadas, sustentadas por exatamente uma evidência, com ids determinísticos para que a recoleta deduplique. TrendScore mede movimento; Confiança mede o quanto a evidência autoriza a afirmação; nunca são fundidos. Divergência entre fontes é reportada, nunca resolvida.

  4. Demonstrador

    Demonstrações sob solicitação.

  5. Impacto no negócio
    • Entidades resolvidas contra registros oficiais, com recusa como resultado registrado
    • Sinais com proveniência do parágrafo à fonte
    • Uma vertical configurada em semanas, não anos: óleo & gás primeiro

Módulos

NELIA

Registro empresarial (CNPJ), redes societárias, estabelecimentos próximos, abertos recentemente.

Documentação da API

CLARA

Referência geográfica, consultas espaciais PostGIS, geocodificação, crosswalk CNAE/ISIC/NCM, um agente LLM sobre um servidor MCP do IBGE.

Documentação da API

NEIVA

Emprego RAIS e CAGED, Quociente Locacional, territórios funcionais.

Documentação da API

THALIA

Fluxos de comércio do Comex Stat por produto, município e país.

Documentação da API

MINERVA

Sinais, snapshots de tendência, redes de atores, grafo de tensões, resolução patente–CNPJ por trigram sobre 69 milhões de linhas de registro.

Documentação da API

CALIA

Extração de documentos e mídia, instanciação de ontologia com proveniência completa ao texto de suporte.

Documentação da API

FARIDA

Taxas, índices e tributos financeiros: séries oficiais e cálculos de correção.

Documentação da API

ELISA

Energia e território: carga e geração do ONS, preços de combustíveis da ANP, focos de queimadas do INPE, alertas de desmatamento do MapBiomas.

Documentação da API

ZELIA

Mensageria em WhatsApp, Telegram, Signal e SMS, com webhooks e ciclo de vida de instâncias.

Documentação da API

CROSS

Orquestração entre domínios: grafos de redes empresariais montados a partir de vários serviços e um endpoint de consulta MCP.

Documentação da API

MARIA

Clusters industriais: busca por nome e o painel de clusters.

Documentação da API

Evidências

  • Execução do MINERVA em 31 de agosto de 2026: 1.683 sinais, 150 documentos, 4.067 observações numéricas, 13 sensores vivos, 9 tendências sobre 22 conceitos de óleo & gás
  • 786.741 patentes e 50.164 registros de software coletados de edições do INPI com zero falhas de download