TDWI 2023: Text Mining & NLP mit Python und PowerBI

Workshop von Jens Albrecht und Roland Zimmermann auf TDWI-Konferenz 2023

Link zum Programm-Eintrag

In diesem Ordner werden die Arbeitsmaterialien für den Workshop abgelegt sowie eine Installationsanleitung.

Für das aktive Mitmachen wird benötigt:

• Am besten ein Google-Account mit Zugang zu Google Colab oder eine Anaconda/Miniconda-Installation auf dem lokalen Rechner (siehe unten)
• PowerBI Desktop (Link zum Download)

Inhalt

Präsentation

PowerBI-Dateien

Im Verzeichnis powerbi. (Die Daten können auf Anfrage erhalten werden.)

Notebooks für den Python-Teil

• Data Preprocessing [View here in git] [View in nbviewer] [Execute on Google Colab]

• Classification [View here in git] [View in nbviewer] [Execute on Google Colab]

• Classification BERT [View here in git] [View in nbviewer] [Execute on Google Colab]

• Semantic Analysis with LLMs [View here in git] [View in nbviewer] [Execute on Google Colab]

Ananconda-Installation

# Anlegen eines virtuellen Environments
conda create --name tdwi
# Aktivieren des Environments
conda activate tdwi
# Python-Pakete installieren
conda env update --file conda_requirements.yml
# Spacy Modell laden
python -m spacy download en_core_web_sm
# Jupyter Notebook starten
jupyter notebook