问:msray可以只采集国外网站域名或网址吗?
答:可以!实现该功能,我们需要借助msray的过滤引擎。
过滤引擎,与重复过滤不同。
重复过滤是系统内置的,而过滤引擎是可以自定义配置,根据多个维度,对抓取到的结果进行处理的引擎;
我们可以配置“网站服务器归属国家过滤“参数,如:
(1) 简介
可针对每条采集结果,解析出域名对应IP所属服务器国家,然后针对国家进行过滤判断。
(2) 说明
如果需要以国家为条件对结果做过滤,那么启用状态必须保持开启!否则规则即使配置了也不会生效;
启用类型,分为“包含”和“不含”;
过滤值,可以有一个或多个;点击新增按钮即可添加。
如果是包含,则采集的网站的服务器所属国家/区域,只存储属于“过滤值”中指定的国家/区域。
如果是不含,则采集的网站的服务器所属国家/区域,只存储不属于“过滤值”中指定的国家所属国家/区域。
比如不想要国内的域名,那么启用类型就选择“不含”,过滤值里面就添加"中国"
注意:规则值,是以网络线路归属国家区域来划分。比如中国、香港、台湾、美国、日本、俄罗斯。