20/12/2016 Development / links

Este aqui é o link da base de dados global do robots.txt

Quem trabalha com SEO deveria ter conhecimento

http://www.robotstxt.org/db.html