Materiały do wystąpienia o TrulensHotspots

• GEval — narzędzie
• GEval: Tool for Debugging NLP Datasets and Models
• TruLens — ogólna biblioteka do ewaluacji/observability
• TruLens Hotspots — nowa emanacja pomysłu GEvala
• pytania? problemy? — zapraszam na Snowflake DataHeroes Community

git clone https://github.com/truera/trulens

python -v venv ~/v/hotspots-demo
. ~/v/hotspots-demo/bin/activate

pip install trulens-hotspots

# sprawdźmy czy działa
python -m trulens.hotspots

# jeśli problem z pkg_resource
pip install setuptools

# z wiersza poleceń
python -m trulens.hotspots trulens/tests/files/sample.csv.gz --score_column score --lower_is_better --skip_columns id

# aplikacja Streamlit
pip install streamlit

python -m trulens.hotspots.hotspots_streamlit

Ciekawostka: wykres częstości słowa certainly.