Blog über Projekte und Themen, die mich interessieren

20mining Yänne 20mining Yänne

Dashboard

Wie in vorgehenden Blogposts angekündigt zeige ich euch in diesem Post mein Rudimentäres Dashboard. Dabei handelt es sich nur um einen Plot der Sqlite3 Datenbank. Dabei kann ich die verschiedenen Crawlnummer über die Zeit verfolgen, sowie die Anzahl Artikel Total und den Anteil der Artikel welche zu Beginn kommentierbar waren. Dies dient nur einem groben Überblick, die genauere Auswertung über die Kommentierbarkeit der Artikel werde ich später erstellen…

Read More
20mining Yänne 20mining Yänne

Anatomie eines Crawlers

Wie im letzten Blogpost versprochen, gehe ich in diesem Post näher auf die Funktionsweise meines Crawlers ein. Vorab: Ich bin kein Software Engineer. Es gibt bestimmt mehrere Wege, wie mein Crawler verbessert werden könnte, bis jetzt scheint jedoch alles so zu funktionieren, wie es soll. Eine Verbesserung will ich aber unbedingt noch implementieren. Näheres am Ende dieses Posts.

Read More