Evaluación

slicemap

Encuentra los segmentos donde un modelo nuevo empeora.

Instalación

pip install slicemap-cli

Una vez publicado en PyPI. También disponible ya desde GitHub:

pip install git+https://github.com/jmweb-org/slicemap

Qué hace

Un modelo nuevo puede subir la métrica global y empeorar en un segmento que importa: un país, una franja de edad, una categoría. slicemap puntúa cada segmento y lista donde el modelo nuevo perdió terreno, ordenado por impacto.

Características

—Segmentación categórica y por cuantiles.
—Métricas accuracy, error y MAE.
—Ranking por impacto: tamaño por degradación.
—Gate de CI y salida JSON.

Ver el código en GitHub →

Otras herramientas

dsdiff

Diff estilo git entre dos datasets, con drift de distribución.

splitcheck

Detecta filas que se filtran entre train, validación y test.

pii-sweep

Escanea datasets en busca de PII antes de compartirlos.