Forum: Programmieren allgemein
Delphi
by himitsu,
17. Jan 2017
http://www.mein-dortmund.de/harvester.html
Die Bots gewisser Suchmaschinen lass ich rein und für Einige stellt die Seite sogar entsprechende Suchhilfen zur Verfügung.
Außerdem meldet meine Seite Änderungen an einige Suchprovider, bzw. stellt Inhaltinfos mit Datumsangaben bereit, damit die Indizierung meiner Seiten schneller geht und weniger Serverlast verursacht, da diese Spider nicht...
Forum: Programmieren allgemein
Delphi
by himitsu,
17. Jan 2017
Vielleicht war ja der Seitenbetreiber so nett und hat eine Sitemap.xml hinterlegt, wo der Link zum Impressum hinterlegt ist.
Andererseits kann er auch so nett sein und die Sitemap oder gar die ganze Website nur für "reale" Besucher und erwünschte Spider freigeben und seine Seite für unerwünschte Spider sperren.
(vorallem in Russland und China bin ich schwer zu finden)
Und die Kontaktdaten...
Forum: Programmieren allgemein
Delphi
by himitsu,
17. Jan 2017
Automatische Mails an fremde unbekannte Adressen zu versenden, würde ich ja eher als "Spam" bezeichnen.
Das ist leider nicht Illegal, aber ...
Forum: Programmieren allgemein
Delphi
by himitsu,
17. Jan 2017
Das Programm ist genauso legal, wie ein Radarwarner. (du darfst ihn kaufen, ihn besitzen, aber nicht auf Straßen benutzen, die der StVO unterliegen)
Es ist nur nicht immer erlaubt einfach so irgendwelche fremden Webseiten auszulesen und deren Informationen zu klauen.
Hängt aber davon ab, was die jeweiligen Webseitenbetreiber dazu sagen.