# robots.txt for 老子有錢 # 允许所有搜索引擎爬虫访问 User-agent: * Allow: / # 允许 Google 爬虫 User-agent: Googlebot Allow: / # 允许 Bing 爬虫 User-agent: Bingbot Allow: / # 允许百度爬虫 User-agent: Baiduspider Allow: / # Sitemap 位置 Sitemap: https://www.08online.com/sitemap.xml # 爬取延迟(秒) Crawl-delay: 1