前言
1.sitemap.json介绍
开发者可以通过 sitemap.json 配置，或者管理后台页面收录开关来配置其小程序页面是否允许微信索引。
2.小程序爬虫特征
当开发者允许微信索引时，微信会通过爬虫的形式，为小程序的页面内容建立索引。当用户的搜索词条触发该索引时，小程序的页面将可能展示在搜索结果中。爬虫访问小程序内页面时，会携带特定的 user-agent：mpcrawler 及场景值：1129。
一、sitemap 配置
小程序根目录下的 sitemap.json 文件用于配置小程序及其页面是否允许被微信索引，文件内容为一个 JSON 对象，如果没有 sitemap.json ，则默认为所有页面都允许被索引；sitemap.json 有以下属性：
1.rules配置项
1.1 rules
1.1.1 matching
二、配置示例
{ "rules":[{ #索引规则列表,rules 配置项指定了索引规则，每项规则为一个JSON对象 "action": "allow", #是否允许被索引,参数:allow(允许)/disallow(不允许) "page": "path/to/page", #页面路径 "params": ["a", "b"], #路径的参数是a,b "matching": "exact" #等于关系,只有是a,b两个参数的时候才允许索引 #(a)不可以,(b)不可以,(a,b)可以,(a,b,c)不可以 #path/to/page?a=1&b=2 => 优先索引 # path/to/page?a=1 => 不被索引 }, { "action": "disallow", #不允许被索引 "page": "path/to/page", #这个路径的页面不允许被索引 "priority":"3" #优先级,数值越大,越优先,否则默认从 },{ "action": "allow", #允许索引 "page": "path/to/page", #索引的路径页面 "params": ["a", "b"], #索引的路径参数 "matching": "inclusive" #包含关系,只要路径参数包含a,b就可以 #(a)不可以,(a,b)可以,(a,b,c)可恶意 }{ "action": "allow", "page": "path/to/page", "params": ["a", "b"], "matching": "exclusive" #交集为空时允许索引 #(无参数)可以,(a)不可以,(a,b)不可以,(a,b,c)不可以,(c)可以 }, { "action": "allow", "page": "path/to/page", "params": ["a", "b"], "matching": "partial" #只要有个参数符合就可以 #(a)可以,(b)可以,(a,b,c)可以 } ] }
