Rust · Open data · PostgreSQL · Structured extraction
Ceres + Ares
Da fonti pubbliche frammentate a un catalogo riutilizzabile e dati strutturati.
Ceres sincronizza metadati open data; Ares estrae informazioni validate rispetto a uno schema dalle pagine web. Coprono fasi diverse della raccolta di dati utili.
Aggiornato da fonti pubbliche ·
Ceres: prima la raccolta
Ceres documenta dieci percorsi di raccolta, inclusi CSW, STAC e SDMX oltre alle varianti CKAN e DCAT. Il lavoro recente aggiunge dataflow statistici e corregge raccolte CSW parziali e distribuzioni SPARQL troppo grandi. Gli snapshot Parquet includono manifest, checksum, report di copertura e changelog; gli embedding restano opzionali.
Ares e i progetti a valle
Ares supporta estrazione locale o hosted con validazione JSON Schema, job persistenti e controlli operativi. Ceres alimenta una pipeline medallion Databricks e un progetto di ricerca in linguaggio naturale basato su Agent Bricks. I repository collegati sono raccolti qui come parti dello stesso lavoro.