Tote Links auf einer Homepage

[Scooby Doo]

An alle Webseitenbetreiber, Technikinteressierte und solche, die den Fehler "die angeforderte Seite konnte nicht gefunden werden" nicht mehr sehen können:

Wie kann man die Links einer Webseite möglichst automatisch überprüfen lassen, um in regelmäßigen Abständen festzustellen, z.B. jede Woche, ob die Links noch funktionieren?

Ich habe dazu extra eine Seite gebaut, wo alle 1631 externen Links aufgelistet sind, die es von meiner Seite hinaus in die weite Welt gibt. Mein Ziel ist es, die toten Links daraus zu fischen, ohne jede Woche alle 1631 Links anklicken zu müssen.

Weiß jemand Rat?

[HashBrown]

Ist vielleicht etwas umständlich, aber trotzdem als Vorschlag:

- Du verwendest Firefox
- über die Website lässt du dann das add-on linkchecker laufen, das zeigt dann die toten links an.

Ich hab eine frühere Version von linkchecker verwendet, daher kann ich dir nicht sagen, ob es immer noch funzt.

[freddykr]

Willst Du nur wissen, ob der Webserver noch antwortet, oder ob noch der korrekte Inhalt drauf ist?

Ersteres sollte per Script ohne Probleme gehen. Musst nur überprüfen, ob Du einen Return-Code 200 zurück bekommst.
Letzteres wird umständlich, geht aber auch. Da musst Du einen Vergleich anstellen, ob das, was Du zurück kriegst, das ist, was Du erwartest.

[frank_gayer]

Hallo Markus,

ich habe dieses Problem auch. Ich nehme dazu immer meinen Editor, das geht aber leider nicht automatisch.
Das ist ein Graus, wenn die Webseiten einfach zumziehen und der Link dann nicht mehr geht.

[Scooby Doo]

Willst Du nur wissen, ob der Webserver noch antwortet, oder ob noch der korrekte Inhalt drauf ist?

Am liebsten wäre es mir natürlich, wenn erkannt werden würde, wenn Links auf solche Fehlerseiten zeigen würden, damit man die Links entfernen kann:
http://www.nps.gov/ausgedacht
http://www.nps.gov/archive/prsf/prsfphot/cultureh.htm
http://www.nps.gov/gis/available_data.html

[freddykr]

Willst Du nur wissen, ob der Webserver noch antwortet, oder ob noch der korrekte Inhalt drauf ist?

Am liebsten wäre es mir natürlich, wenn erkannt werden würde, wenn Links auf solche Fehlerseiten zeigen würden, damit man die Links entfernen kann:
http://www.nps.gov/ausgedacht
http://www.nps.gov/archive/prsf/prsfphot/cultureh.htm
http://www.nps.gov/gis/available_data.html

Ich wüßte nicht, wie man dies automatisieren soll.
Du könntest nach solchen Phrasen wie "Page has been removed" o.ä. automatisch suchen lassen und Dir die gefundenen Seiten nochmal selbst anschauen.

[Scooby Doo]

Ich glaube, diese Seite ist in diesem Zusammenhang nicht schlecht, auch wenn man die Seite mit der Linkliste noch händisch eintragen muss:
http://validator.w3.org/checklink

[Lal@]

Bei NetObjects ist ein Linkchecker inclusive....

[frank_gayer]

Bei NetObjects ist ein Linkchecker inclusive....

Hallo Volker,

prüft dieser automatisch oder muss man wie beim Dreamweaver daran denken und starten ?

[freddykr]

Ich glaube, diese Seite ist in diesem Zusammenhang nicht schlecht, auch wenn man die Seite mit der Linkliste noch händisch eintragen muss:
http://validator.w3.org/checklink

der bringt Dir bei Deinen obigen Beispielen aber auch nicht viel, da er nicht auf Plausibilität prüft.

[Scooby Doo]

Ich habe mit dem vom mir verlinkten noch nicht Toten Link http://validator.w3.org/checklink gestern mal ein wenig gespielt. Ihc habe keine Ahnung, ob er alles gefunden hat, aber von 1631 hat er 30 tote Links gefunden, die ich entfernen musste sowie etwa 60, die ich durch Alternativen ersetzen konnte.

Besonders nervig sind die Stateparks in Kanada, die ändern sich ja ständig. Die habe ich schon 2 mal updaten müssen.

[HashBrown]

Mir kam gerade die Idee, dass du die Parks auch mit googlemaps verlinken könntest, weil sich die Adresse ja nicht ändert. Dazu müsste dann allerdings bei dem jeweiligen Park etwas eingegeben sein. Das hab ich gerade mal getestet.
Beim Grand Canyon gibt es ja immerhin noch was, aber beim Bowron Lake von deiner HP hab ich gar nichts angezeigt bekommen.
Ist also vielleicht eher was für die Zukunft... 

[Lal@]

Bei NetObjects ist ein Linkchecker inclusive....

Hallo Volker,

prüft dieser automatisch oder muss man wie beim Dreamweaver daran denken und starten ?

Muss ich dran denken. So alle 2-3 Monate. Ich will ja nicht overtreiben.....

[womey]

Hallo,

für diejenigen, die einen Webserver mit Mysql-Datenbank haben (und bereit sind, etwas Zeit zu investieren ) kann ich nur Redaktionssysteme wie z.B. Typo3, Yoomla etc. empfehlen. Damit tritt das Problem nicht auf, da Links über eine Datenbank gesetzt werden. Wird eine Seite gelöscht oder deaktiviert, wird auch automatisch der Link deaktiviert und führt so nicht mehr ins Leere.

Der Aufwand und die Einarbeitung ist natürlich nicht zu unterschätzen.

Wolfgang

[Scooby Doo]

@womey
Wie kann das funktionieren? Woher weiß meine Seite, dass in Kanada die Seiten der Stateparks mal wieder umgezogen sind? Es geht hier um externe Links!

Meine internen Verlinkungen habe ich sehr gut im Griff.