Das Problem könnte bei der Überrüfung sein, dass es oftmals Unterseiten gibt, die nicht mehr existieren. Ist das der Fall, so ist es dann keine nicht-gefundende
URL, sondern man kommt auf eine Servereigene 404-Seite. Die Frage ist, wie das erkannt werden kann.
Ich denke, es wäre am besten, wenn es zusätzlich noch eine Möglichkeit für jeden User gäbe, einen defekten Link zu melden!