Robots.txt | MEDIENWOCHE https://medienwoche.ch Magazin für Medien, Journalismus, Kommunikation & Marketing Thu, 05 Nov 2020 07:18:33 +0000 de hourly 1 https://wordpress.org/?v=6.9.1 robots.txt, SEO und Crawling-Steuerung https://medienwoche.ch/2020/11/05/robots-txt-seo-und-crawling-steuerung/ Thu, 05 Nov 2020 07:18:33 +0000 https://medienwoche.ch/?p=83092 Die robots.txt Datei dient dazu, Webcrawler anzuweisen, welche Bereiche einer Domain gecrawlt werden sollen und welche nicht. Heute erkläre ich Dir, wofür Du die robots.txt nutzen kannst, wie sie aufgebaut ist und was es zu beachten gibt.

The post robots.txt, SEO und Crawling-Steuerung first appeared on MEDIENWOCHE.

]]> Die robots.txt Datei dient dazu, Webcrawler anzuweisen, welche Bereiche einer Domain gecrawlt werden sollen und welche nicht. Heute erkläre ich Dir, wofür Du die robots.txt nutzen kannst, wie sie aufgebaut ist und was es zu beachten gibt.

The post robots.txt, SEO und Crawling-Steuerung first appeared on MEDIENWOCHE.

]]> Google unterstützt Noindex in der Robots.txt nicht mehr https://medienwoche.ch/2019/07/08/google-unterstuetzt-noindex-in-der-robots-txt-nicht-mehr/ Mon, 08 Jul 2019 16:07:06 +0000 https://medienwoche.ch/?p=70820 Ab 1. September gelten neue Regeln für den Suchmaschinen-Einweiser. Google unterstützt dann einige Anweisungen in der Robots.txt nicht mehr. Sie werden angeblich zu selten verwendet.

The post Google unterstützt Noindex in der Robots.txt nicht mehr first appeared on MEDIENWOCHE.

]]> Ab 1. September gelten neue Regeln für den Suchmaschinen-Einweiser. Google unterstützt dann einige Anweisungen in der Robots.txt nicht mehr. Sie werden angeblich zu selten verwendet.

The post Google unterstützt Noindex in der Robots.txt nicht mehr first appeared on MEDIENWOCHE.

]]>