URL Aufbau

[Xot]

Hallo,

ich habe eine generelle Frage zum Aufbau einer URL. Ich bin zurzeit dabei mir einen Webcrawler zu schreiben und möchte nun doppelte URL's filtern. Da jedoch manchmal zB klamm.de verlinkt wird und manchmal www.klamm.de ist es schwieriger doppelte URL's zu erkennen.

Nun bin ich mir nicht sicher, ob alle URL's die man ohne www erreichen kann auch mit www erreichen kann (Da es umgekehrt ja manchmal nicht geht!). Kann jemand mehr dazu sagen?

MfG
Xot

 

[Querulant]

Meines Wissens nach ist klamm.de & www.klamm.de das gleiche, bzw. mir wäre auch nichts anderes bekannt.

 

[Xot]

Meines Wissens nach ist klamm.de & www.klamm.de das gleiche, bzw. mir wäre auch nichts anderes bekannt.

Ja bei klamm.de ist es über beides zu erreichen. Jedoch bin ich über folgenden Blog gestolpert:
https://www.seo-handbuch.de/suchmas...satz-killer-website-ohne-www-nicht-erreichbar

Nun meine Frage ist ob dies auch umgekehrt passieren kann. Also das Domains mit www nicht erreichbar sein können.

 

[Renegade]

Hi,

Das "www" vor einer Domain ist nur eine Subdomain. Sie muss also nicht immer zwingend aktiviert sein.

Vielfach wird aber auch eingestellt, dass wenn man die Domain ohne "www" aufruft auf die Subdomain umgeleitet wird.

 

[wahnsinn]

Technisch gesehen kann example.com und www.example.com etwas völlig unterschiedliches sein. Sogar ein ganz anderer Server am entgegengesetzten Ende der Welt.

 

[theHacker]

https://tools.ietf.org/html/rfc1738