hexo配置robots.txt

1、hexo添加robots.txt

创建一个robots.txt文件，然后输入下面的配置

# hexo robots.txt
User-agent: *
Allow: /
Allow: /archives/

Disallow: /vendors/
Disallow: /js/
Disallow: /css/
Disallow: /fonts/
Disallow: /vendors/
Disallow: /fancybox/

Sitemap: http://www.saiita.cn/sitemap.xml
Sitemap: http://www.saiita.cn/baidusitemap.xml

2、把robots.txt文件放入到public文件夹下面

本作品采用知识共享署名-相同方式共享 4.0 国际许可协议进行许可。