Wie bereits erwähnt, gibt es zahlreiche Websites zum Thema Cyberkriminalität im Internet, aber das Scraping ihrer Daten ist ohne entsprechende Genehmigung rechtlich nicht zulässig. Alle Techniken, die Sie hier lernen, lassen sich jedoch problemlos in autorisierten Umgebungen anwenden. Ich muss jedoch betonen, dass Sie vor dem Testen einer Technik die ausdrückliche Genehmigung einholen müssen.
Sie lernen, wie Sie mit Docker Ihre eigenen Websites lokal einrichten können.
Die in diesem Abschnitt behandelten Themen umfassen:
- Einrichtung eines Clearnet-Forums
- Einrichtung eines Tor-Netzwerkforums
Einrichtung eines Clearnet-Forums
Bevor wir uns mit der Einrichtung befassen, möchte ich Ihnen erklären, warum wir zwei separate Websites benötigen. Der Grund dafür ist, dass Sie auf alle Szenarien vorbereitet sein sollen – unabhängig davon, ob Ihr Ziel ihre Website im Tor-Netzwerk oder im normalen Internet hostet, sollten Ihre Fähigkeiten an jede Umgebung anpassbar sein.
In einem Clearnet-Forum lernen Sie, wie Sie mithilfe von Browser-Automatisierung Daten aus Websites extrahieren können. Wenn Sie jemals die Funktion „Element untersuchen” auf einer Website verwendet und Unterschiede zwischen dem Quellcode der Seite und den gerenderten Elementen festgestellt haben, handelt es sich dabei um dynamisch geladene Inhalte – etwas, das wir mit Playwright automatisieren werden.
Wir werden hier nicht auf die detaillierte Einrichtung des Forums eingehen, aber ich kann Ihnen versichern, dass dies nur wenige Minuten dauert. Um loszulegen, öffnen Sie den folgenden Link und folgen Sie der Anleitung:
https://github.com/CyberMounties/clearnet_forum
Nach der Einrichtung sollte Ihr Forum so aussehen:
Wenn Sie neue Nachrichten in der „Shoutbox“ oder neue Beiträge sehen, die automatisch im „Sellers Place“ gepostet wurden, ist das völlig beabsichtigt. Auf diese Weise möchte ich die Website mit Echtzeitaktivitäten lebendig wirken lassen.
Sie finden auch Beiträge in verschiedenen Sprachen wie Russisch, Chinesisch und Koreanisch:
Einrichtung eines Tor-Netzwerkforums
Ein Tor-Forum dient einem ähnlichen Zweck wie ein Clearnet-Forum, mit einem wesentlichen Unterschied: Es wird kein JavaScript verwendet. Dies erleichtert die Datenextraktion erheblich, da alle Inhalte direkt vom Backend in das Frontend geladen werden. Alles wird verfügbar, wenn Sie den Quellcode der Seite anzeigen, wodurch das Abrufen von Seiten vereinfacht wird.
Um mit der Einrichtung zu beginnen, öffnen Sie den folgenden Link und folgen Sie der Anleitung:
https://github.com/CyberMounties/tornet_forum
So sieht das Forum nach der Einrichtung aus, Bild aus dem Tor-Browser:
Es ist Ihre Aufgabe, beide Websites vollständig zu erkunden. Sie müssen sich unbedingt mit der Website vertraut machen.