News:

Willkommen im Notebookcheck.com Forum! Hier können sie über alle unsere Artikel und allgemein über Notebook relevante Dinge disuktieren. Viel Spass!

Main Menu

Google ändert Regeln für die Robots.txt und veröffentlicht eigenen Parser

Started by Redaktion, July 04, 2019, 18:37:50

Previous topic - Next topic

Redaktion

Google hat bekannt gegeben, dass die gleichnamige Suchmaschine ab dem ersten September einige Anweisungen in der Robots.txt von Webseiten nicht mehr unterstützen wird. Diese Dateien werden genutzt, um Webcrawlern von Suchmaschinen zu vermitteln, welche Teile der Webseiten relevant sind.

https://www.notebookcheck.com/Google-aendert-Regeln-fuer-die-Robots-txt-und-veroeffentlicht-eigenen-Parser.426978.0.html

Quick Reply

Warning: this topic has not been posted in for at least 120 days.
Unless you're sure you want to reply, please consider starting a new topic.

Name:
Email:
Verification:
Please leave this box empty:

Shortcuts: ALT+S post or ALT+P preview