如何查看网站的 robots.txt 文件?
您可以通过以下两种方法查看网站的'robots.txt'文件:
-
在浏览器地址栏中添加 /robots.txt 例如,要查看 www.example.com 网站的'robots.txt'文件,您可以在浏览器地址栏中输入:
www.example.com/robots.txt -
使用搜索引擎搜索 您也可以在搜索引擎中搜索
site:www.example.com robots.txt来查找该网站的'robots.txt'文件。
原文地址: https://www.cveoy.top/t/topic/ovz6 著作权归作者所有。请勿转载和采集!