Hallo,
ich habe gelesen, dass man über eine Honigtopf - Falle eventuelle spider Programme daran hindern kann, durch das Verzeichnis zu krabbeln, auch wenn man in der robot.txt das ausdrücklich unterbinden will.
Hat jemand damit Erfahrung und könnte er das mal kommentieren (Vor- und Nachteile)?
Danke
olksotbe