# 允许百度蜘蛛抓取指定内容 [必须居首]
User-agent: Baiduspider
Disallow: /Admin
Disallow: /Thinkphp
# Allow: /

# 禁止百度移动蜘蛛 [试运行]
User-agent: Baiduspider-mobile
Disallow: /

# 禁止头条蜘蛛
User-agent: ToutiaoSpider
Disallow: /

# 禁止360蜘蛛
User-agent: 360Spider
Disallow: /

# 禁止搜狗蜘蛛
User-agent: Sogou web spider
Disallow: /

# 禁止一搜蜘蛛（360旗下）
User-agent: YisouSpider
Disallow: /

# 屏蔽韩国蜘蛛
User-agent: NaverBot
Disallow: /

# 禁止其他所有搜索引擎
User-agent: *
Disallow: /