压缩去重并移除AdGuardHome不受支持的规则

[zutzo]

@BlueSkyXN
建议用AdGuard官方的HostlistCompiler处理规则
https://github.com/AdguardTeam/HostlistCompiler
主规则我看了一下 有很多AdGuardHome不支持的规则 比如 $3p ## 等等 这些规则不适用于ADGH
并且规则夹杂着ABP和Hosts 两者普通工具无法进行合并去重 增大了文件的大小 也给ADGH重负担
通过使用HostlistCompiler可以解决

（顺便问一下为什么规则连注释都不删😓

Originally posted by @zutzo in #16 (comment)

[zutzo]

在 #16 的评论区提出过 不知是否没有看到

[BlueSkyXN]

后面考虑来个lite版吧
不删除注释主要是为了考虑出处权利
保留adb规则是因为可以放在浏览器插件类软件比如ublock使用

[zutzo]

ubo 怕是浏览器撑不住
而且博客文章也是写的给ADH用
保留出处的话建议直接在文件开头写规则链接

[BlueSkyXN]

ubo 怕是浏览器撑不住

而且博客文章也是写的给ADH用

保留出处的话建议直接在文件开头写规则链接

1，注释的话，我会观察一下然后用python基本去重
2，然后官方的工具需要一定时间测试
3，会把目前同款命名为-full，这个仅供备用，大多数情况下UB自带规则足够使用
4，提纯为ADH专用的和目前同名
5，目前计划用几个Py自动脚本进行过滤，但是得看官方工具的效果了

[BlueSkyXN]

ubo 怕是浏览器撑不住

而且博客文章也是写的给ADH用

保留出处的话建议直接在文件开头写规则链接

但是这个可能需要一定的时间，不确定本月能不能完成，尽量在今年完成优化

国庆期间底层重构了随机图API、2个图床；
新写了3001/tgph自动上传工具啥的；
目前还是比较忙的，看看排期吧，优先级不甚高

目前💩山个人使用应该影响不大

[zutzo]

官方工具可以自动转换hosts
规则里有很多hosts规则 你普通Python是去重不了的（与ABP规则去重

我做了个简单的项目 可以参考下 https://github.com/zutzo/ad-filters

[LangzhuYue]

windows上有去重工具，也有在线网页版去重，百万规则去重也就0.3秒，一下子去掉22万条重复的。。。

[BlueSkyXN]

windows上有去重工具，也有在线网页版去重，百万规则去重也就0.3秒，一下子去掉22万条重复的。。。

有用python按行过滤

目前没有时间额外做专业工具对决

[zutzo]

主要是hosts与adp规则有大量重复，adg官方工具能转化解决