# 鸽子窝网站爬虫规则
User-agent: *
Allow: /

# 允许所有搜索引擎访问主要页面
Allow: /index.html
Allow: /contact-us.html
Allow: /join-us.html
Allow: /emoji.html

# 禁止访问管理和配置文件
Disallow: /admin.php
Disallow: /config.php
Disallow: /save-news.php
Disallow: /simple_test.php
Disallow: /login_attempts.json
Disallow: /news.json

# 禁止访问系统文件
Disallow: /.htaccess
Disallow: /.htaccess_minimal

# 特别针对 Bing 搜索引擎优化
User-agent: bingbot
Allow: /
Crawl-delay: 1

# 特别针对百度搜索引擎优化
User-agent: Baiduspider
Allow: /
Crawl-delay: 1

# 站点地图位置
Sitemap: https://ab1f5a.net/sitemap.xml

# 主机信息
Host: ab1f5a.net