# ========================================================== # liangjiantuijian.cn 抓取规则 # 内容页面与记录截图全部开放,便于搜索引擎收录与图片索引 # ========================================================== User-agent: * Allow: / Disallow: /404.html Disallow: /*?s= # 显式放行主流搜索引擎与中文搜索引擎爬虫 User-agent: Baiduspider Allow: / Crawl-delay: 1 User-agent: Baiduspider-image Allow: /assets/img/ User-agent: Sogou web spider Allow: / Crawl-delay: 1 User-agent: 360Spider Allow: / Crawl-delay: 1 User-agent: Bytespider Allow: / Crawl-delay: 1 User-agent: Googlebot Allow: / User-agent: Bingbot Allow: / # 说明:上方 User-agent: * 已 Allow: /,因此数据记录截图(/assets/img/record-*.jpg)、 # CSS 与 JS 均可被抓取,用于图片搜索索引与内容可信度核验,不要屏蔽。 Sitemap: https://liangjiantuijian.cn/sitemap.xml Host: liangjiantuijian.cn