# robots.txt file for 86960.cn
# 允许所有搜索引擎爬虫抓取
User-agent: *
Allow: /

# 禁止抓取的路径
Disallow: /css/
Disallow: /js/

# 指向sitemap.xml文件
Sitemap: https://www.86960.cn/sitemap.xml

# 爬虫抓取频率建议
Crawl-delay: 10

# 针对特定搜索引擎的设置
User-agent: Googlebot
Allow: /
Crawl-delay: 5

User-agent: Baiduspider
Allow: /
Crawl-delay: 8

User-agent: Bingbot
Allow: /
Crawl-delay: 6

User-agent: YandexBot
Allow: /
Crawl-delay: 10