10 DOs & DON‘Ts zu den Themen Informationsarchitektur & interne Verlinkung, inkl. Priorisierung, Indexierungssteuerung & Verwendung von On-Page Tools wie bspw. DeepCrawl, etc.
18. ROBOTS.TXT VS. NOINDEX
WAS, WANN & WIESO?
<meta name="robots" content="noindex, follow" />
User-Agent: *
Disallow: /dateiname.html
Seite wird
gecrawled.
Seite wird nicht
indexiert.
Seite erscheint
nicht in SERPs.
Seite “zum Teil”
indexiert.
Seite wird nicht
gecrawled
URL erscheint in
SERPs.
25. ACHTUNG: GOOGLE!
„WIR WISSEN EH‘ ALLES BESSER!“
Is rel="canonical" a hint or a directive?
It's a hint that we honor strongly. We'll take
your preference into account, in conjunction
with other signals, when calculating the
most relevant page […]