Vor ein paar Tagen wurde in einer Facebook Runde gefragt, wie eine XML-Sitemap eingebunden werden sollte. Das aus meiner Sicht ideale Vorgehen eine XML-Sitemap verborgen einzubinden. Mitunter ist die XML der klarste Indikator über Veränderungen meines Sortiments bzw. meiner Inhalte. Etwaige Beobachter werden sofort über Änderungen informiert.
Es ist zwar nur eine kleine, aber immerhin eine Hürde, mich gegenüber dem Wettbewerb bedeckt zu halten, wenn ich ihm Änderungen nicht in einem frei verfügbaren Feed zur Verfügung stelle. Gegen ernsthafte Interessenten an meinem Datenbestand ist dies natürlich keine Verteidigung, für den „Wald und Wiesen Spion“ aber eine Art Bodenwelle. Nebenhin vermeide ich mit einem „noindex“ auch die versehentliche Darstellungen der XML auf der SERP und trage so auch ein kleines Sandkörnchen zur Wahrung der Besucherzufriedenheit bei.
Verwende untypische Dateinamen, wie bspw. sitemap-47111100815.xml um menschlichen oder automatisierten Systemen die Abfrage typischer Muster zu erschweren.
Setze keinen Eintrag in der Robots.txt um Suchende direkt auf deine Sitemaps zu stoßen. Nutze statt dessen die Anmeldung via Google Search Console, Bing Webmaster Central usw. Ergänzend kannst Du einen Suchmaschinen per Ping über eine aktualisierte XML-Sitemap informieren.
Aus verschiedenen Gründen kann es dazu kommen, dass Suchmaschinen deine XML-Sitemaps indexieren. Eine Kombination der Suchoperatoren site: und filetype: würde direkt zu deinen XML-Sitemaps führen. Verwende daher den HTTP-Header X-Robots: noindex um die Indexierung zu vermeiden.