# robots.txt · 新城娱乐 XINCHENG
# 域名：https://www.xinchengnb.com/
# 说明：站点为纯静态美食直播企业官网，除构建脚本目录外全部开放抓取

User-agent: *
Allow: /
Disallow: /tools/
Disallow: /404.html

# 百度搜索资源平台
User-agent: Baiduspider
Allow: /
Allow: /assets/
Disallow: /tools/
Disallow: /404.html

User-agent: Baiduspider-mobile
Allow: /
Disallow: /tools/
Disallow: /404.html

User-agent: Baiduspider-image
Allow: /assets/
Disallow: /tools/
Disallow: /404.html

# 其他常见抓取器
User-agent: Sogou web spider
Allow: /
Disallow: /tools/

User-agent: 360Spider
Allow: /
Disallow: /tools/

User-agent: YisouSpider
Allow: /
Disallow: /tools/

Sitemap: https://www.xinchengnb.com/sitemap.xml