Download Data

[InterestedStudent]

Hallo,
vielen Dank für dieses tolle Projekt. Ich bin noch neu im R und habe auch keine Vorkenntnisse im Scraping, aber ich habe die App installiert und sie funktioniert.

--> Seltsamerweise kann ich nur 18 Einträge downloaden, obwohl ich mehr einstelle. Ich denke, nur die erste Seite bei WG Gesucht wird erfasst, aber nicht die Folgeseiten.

--> Ich frage mich, ob man auch die Einträge für alle Städte gebündelt downloaden kann, sodass ich die durchschnittlichen Preise zwischen Städten vergleichen kann. Gibt es da eine elegante Lösung?

Liebe Grüße

[jansim]

Hallo InterestedStudent,

Vielen Dank für dein Interesse!

--> Seltsamerweise kann ich nur 18 Einträge downloaden, obwohl ich mehr einstelle. Ich denke, nur die erste Seite bei WG Gesucht wird erfasst, aber nicht die Folgeseiten.

Bzgl den 18 Einträgen weiß ich auch nicht genau woran das liegt, eventuell gibt es auch nur 18 Einträge für die Stadt die du lädst? Normalerweise sollten es bei einer Seite zumindest eine runde Zahl an Einträgen sein glaube ich 🤔

--> Ich frage mich, ob man auch die Einträge für alle Städte gebündelt downloaden kann, sodass ich die durchschnittlichen Preise zwischen Städten vergleichen kann. Gibt es da eine elegante Lösung?

Du könntest denke ich die Funktionen in data.R verwenden um die Daten für mehrere Städte runter zu laden. Hierbei musst da aber auch bedenken, dass man nicht zu viele Daten von wg-gesucht herunterladen sollte weil sich dies (1) nicht unbedingt gehört, da der Platform dabei Server-Kosten etc. entstehen und (2) deine IP-Addresse bei übermaßigem Scraping von wg-gesucht gesperrt werden könnte. Deshalb würde ich dort ein bisschen zur Vorsicht raten 😉