Soms zijn het de kleine dingen die het vreemdst aandoen.
Sinds jaar en dag staan er .cfm’s in de adressen van MySpace, van toen het daar nog ColdFusion was vermoed ik.
En sinds jaar en dag waren de URL’s van Amazon herkenbaar. Eerst stond er /exec/obidos/ in de URL (naar de stad Óbidos aan de Amazone), zoals hier bijvoorbeeld: Middle Eastern Mythology: From the Assyrians to the Hebrews.
Een beetje later stond er /gp/ in (voor Gurupá, ook een stad aan de Amazone), zoals hier: About Face.
En nog wat later stond er /dp/ in (voor, prozaisch, “detail page”): If Chins Could Kill: Confessions of a B Movie Actor.
Natuurlijk werken al die URL’s nog. Ze zouden wel gek zijn om ze niet meer te doen werken. Maar wat me nog niet bewust opgevallen was tot daarnet, is dat er al een hele tijd trefwoorden in de default URL staan: om aan de pagina van Thoughtful Interaction Design: A Design Perspective on Information Technology te raken staat er http://www.amazon.com/Thoughtful-Interaction-Design-Perspective-Information/dp/0262122715/.
Dat deed vreemd aan: het was me nog niet opgevallen, en het is zeker al anderhalf jaar of langer zo.
http://www.amazon.com/dp/ISBN-nummer is trouwens genoeg om tot aan een detailpagina te geraken van een boek te raken, voor wie plaats wil uitsparen.
Ja, da’s gelijk zeggen dat er in het meer van Loch Ness misschien een monster zit, ik weet het.
Wat meer is, URL rewriting wordt in 99% van de gevallen misbruikt. Ik denk dat ze bij Google al serieus zitten vloeken hebben op het feit dat
– http://www.amazon.com/Thoughtful-Interaction-Design-Perspective-Information/dp/0262122715/
– http://www.amazon.com/dp/0262122715/
– http://www.amazon.com/Uw-Ma-is-een-Hoer/dp/0262122715/
allemaal op dezelfde pagina uitkomen, zonder een redirect of nietnduvel ertussen. De Vlaemsche kranten doen dat bv. ook graag.
Wie de crawlers dus eens goed bij hun digitaal pietje wil hebben, moet maar gewoon wat strings randomizen. Moraal van het verhaal: geef pagina’s een unieke URI en gebruik een HTTP redirect als de request URI er niet mee overeenkomt.
Uw spamfilter is niet compatibel met mijn humor.
Dit is wat hij erop te zeggen had:
0: Encrypted payload valid: IP matching.
0.5: Valid Javascript payload (can be fake).
-14.85: 3 blacklist matches. (5747 = amazon.com [x3])
-0.52: Comment contains: 0 linked URLs and 3 unlinked URLs: total link coef: 2 >= threshold (2).
Amazon.com op de blacklist gewoon.
Vermoedelijk omwille van referral URL’s. Ik had er inderdaad beter één in gezet.
Zone 09 is er nog sterker in: kijk maar eens naar de titel (-balk van uw browser) van deze pagina.