Einführung:
Wir alle wissen, dass wir die Informationen in den Daten leicht erhalten können, wenn relativ wenige Daten vorhanden sind. Wenn die Daten jedoch relativ groß sind, ist es für uns schwierig, sie zu erkennen. Gerade angesichts der heutigen Zehntausenden von Daten ist dies umso wichtiger.
Glücklicherweise können wir Computer zur Analyse nutzen, und eine der effizienteren Methoden ist die Datenvisualisierung. Durch die Visualisierung von Daten können wir die Daten sprechen lassen. Dies hilft uns bei der Analyse der Daten und ermöglicht es uns, die Daten schneller zu verstehen.
Rezension:
Als Fortsetzung des vorherigen Kapitels haben wir zuvor einen Crawler geschrieben, um Weibo-Kommentare zu erhalten. Die erhaltenen Daten lauten wie folgt:
Es ist ersichtlich, dass die oben genannten Daten tatsächlich mit bloßem Auge schwer zu erkennen sind. Gleichzeitig sind diese Daten auch sehr unintuitiv. Dann können wir diese Daten durch Datenvisualisierung visualisieren.
Das Folgende ist der Effekt der Verwendung von Pyecharts zur Visualisierung der von uns gecrawlten Daten.
Im ersten geht es um die Fan-Daten von Nutzern mit mehr Fans in den Kommentardaten.
Im zweiten geht es um die Aufmerksamkeitsdaten von Nutzern mit mehr Fans in den Kommentardaten.
Im nächsten Schritt geht es darum, die Adresse zu visualisieren, an der die Kommentare veröffentlicht werden. Anhand der Abbildung können wir testen, wo immer Sie hingehen, mehr Leute werden Kommentare lesen. Sie können sich das Video unten ansehen, um spezifische Effekte zu erfahren.
Darüber hinaus wird anhand einer Zeitstatistik ermittelt, zu welchem Zeitpunkt die meisten Kommentare gepostet wurden.
Die folgende Tabelle zeigt die Häufigkeit des Vorkommens der Top-20-IP-Adressen in allen Kommentaren. Wie Sie hier sehen können, hat Peking die meisten Kommentarbenutzer in diesem Weibo-Kommentar.
Wir können auch Statistiken über das Geschlecht der Kommentatoren erstellen. Nachfolgend finden Sie die Geschlechterverteilung der Weibo-Kommentare. Das
letzte ist die Profildatenvisualisierung von die Benutzer in den Kommentaren, das heißt, die personalisierte Signatur des Benutzers, der den Kommentar auf diesem Weibo gepostet hat, und führen Sie dann eine Wortwolkenanzeige dieser Signaturdaten durch.
Kommentieren Sie die Videoeinführung zur Datenvisualisierung:
Praktische Crawler-Kampf-Visualisierung von Weibo-Kommentaren
Das Obige ist der gesamte Inhalt, der dieses Mal geteilt wurde.
Aufgrund der begrenzten Fähigkeiten des Autors kann es zu Ungenauigkeiten bei der Formulierung der Frage kommen, also haben Sie bitte Geduld! ! !
Vollständiger Quellcode: Praktischer Crawler-Kampf – Visualisierung von Weibo-Kommentardaten