andrea bozzo / personal home page

← Tutti i progetti

projects / dataprof

Rust · Python · Apache Arrow · Data quality

dataprof

Profilazione a memoria limitata per file, DataFrame e stream Arrow.

Un crate Rust e un pacchetto Python in beta per capire dati tabulari sconosciuti: struttura, tipi, statistiche, segnali di qualità e report confrontabili. La CLI appartiene alle release storiche.

Aggiornato da fonti pubbliche ·

Più input, un’installazione Python essenziale

La wheel Python supporta file locali, dizionari, buffer di byte, profiling HTTP asincrono e input compatibili con Arrow. I connettori database richiedono ancora una build da sorgente. I report si salvano, confrontano, rendono in Markdown o riassumono per un agente.

Correttezza prima di un punteggio più bello

Il lavoro recente copre Arrow C Stream, lettura completa delle tabelle a chunk, copertura del campionamento Parquet, aggregazioni numeriche stabili e gestione coerente delle sorgenti vuote. I report esplicitano quando non è stato possibile valutare la qualità.