Scraping - Erfahrungen?

Ich habe eine Frage zum Web Scraping. Bis jetzt haben wir (Preisüberwachung) alle Angaben, die wir von den Unternehmen erheben, bei diesen angefragt. Gerade bei öffentlich zugänglichen Angaben, wie Preisen, stellt sich die Frage, ob wir diese Angaben nicht selbst holen könnten – auch im Hinblick darauf, dass derartige Ersuchen unsererseits für die betroffenen Unternehmen stets einen Aufwand generieren. Wir haben uns deshalb die Frage gestellt, ob wir diese Angaben nicht anhand von Web Scraping zusammentragen können. Mittlerweile führen jedoch diverse Unternehmen auf ihren Webseite-Userbedingungen auf, dass das Scrapen bzw. Spidern untersagt sei.

Wir gehen aktuell der Frage nach, ob der Staat (bzw. in unserem Fall die Preisüberwachung), bei seiner hoheitlichen Tätigkeit überhaupt an solche einseitig erklärten Webseite-Userbedingungen gebunden ist. Wir haben vereinzelte Beiträge zur rechtlichen Zulässigkeit des Web Scraping gefunden, und auch zur Frage, ob derartige einseitige Webseite-Userbedingungen überhaupt bindend sind. Jedoch befasst sich – meines Wissens – keiner mit dem Staatshandeln.

Aus diesem Grund nun meine Frage an euch: Habt ihr Inputs zu diesem Thema?