【笔记】Hexo添加robots.txt文件

发表于 更新于 阅读次数：

前言

Hexo添加robots.txt文件

添加依赖

1
npm install hexo-robots

修改配置

user_agent：配置允许访问的UA
allow：配置允许访问的路径
disallow：配置不允许访问的路径
sitemaps：配置站点地图

_config.yml
1
2
3
4
5
6
7
8
9
robots:
  user_agent: "*"
  allow:
    - /
  disallow:
    - /assets/
  sitemaps:
    - https://loli.fj.cn/sitemap.xml
    - https://loli.fj.cn/sitemap.txt

完成