网站优化 一、问题场景 使用typecho搭建的网站,默认没有robots.txt文件,为了可以让搜索引擎更快、更好的收录网站内容,需要我们自己动手添加 二、什么是Robots协议 Robots协议又称爬虫协议,全称是“网络爬虫排除标准”(Robots Exclusion Protoco