WebScraping – Automatisiert Daten sammeln!
In dem Kurs werden wir aktuelle Dax Daten von der Webseite boerse.de sammeln und verwertbar speichern.
Webscraping heißt automatisch Daten aus verschiedenen Webseiten auslesen!
Du wirst ohne große Vorkenntnisse und in kürzester Zeit in die Lage versetzt, automatisiert deine Wunschdaten aus dem Internet zu sammeln.
Am Ende kannst du das Gelernte mit eigenen Anwendungen umsetzen und dir deinen Alltag erleichtern!
Es ist kein Grundlagenkurs!
Aber ich nehme dich an die Hand und durchlaufe mit dir den ganzen Prozess Schritt für Schritt.
Du wirst einfach folgen und Zusammenhänge verstehen können und damit deinen ersten Einstieg in die Softwareentwicklung finden.
Es gibt keine Mindestanforderungen!
Sei einfach nur offen für neues und bereit zu lernen!
Grundlagen
-
1
PyCharmHier bekommst du einen Kurzüberblick über PyCharm.
Dabei lernst du die folgenden Punkte:
-
Anlegen eines neuen Projektes
-
Anlegen einer neuen, virtuellen Umgebung
-
Paketverwaltung über PyCharm
-
Anlegen einer neuen Skript-Datei
-
Ausführen des Skripts
-
Run Configurations
-
-
2
Manuelles Vorgehen
Wir sehen uns die Seite und die Daten erst einmal manuell an.
Damit siehst Du womit wir es zu tun haben und wo auf der Seite wir unsere Daten finden können.Hier machen wir uns auch gleich Notizen, die wir später für die Entwicklung unseres Programms benötigen.
Dax-Daten sammeln
-
3
Daten einsammeln
In diesem Video laden wir die Daten der Webseite runter.
Du lernst, wie man mit der Bibliothek requests eine Webseite abfragt und in einer Variablen speichert. -
4
Daten filtern
Mit Hilfe der Bibliothek BeautifulSoup wirst du die geladene Webseite filtern, um deine Wunschdaten herauszulösen.
-
5
Daten auslesen
Nachdem die Webseite geladen und die Daten gefiltert sind, extrahierst du jetzt die Daten in ein Pythonobjekt.
Im Anschluss sehen wir uns das Objekt im JSON Format mithilfe der Bibliothek json auf der Konsole an.
-
6
Daten in Datei schreiben
Die Bibliotheken csv und json helfen uns, die herausgelösten Daten jetzt in zwei entsprechende Dateien zu schreiben und abzuspeichern.
Downloads
Hinterlassen Sie als Erstes eine Bewertung.
