提高筛序效率

[cxz32426]

你需要什么功能？
抓取页面的“ID范围”能否分成小说ID和插画ID？
更多页面的“不下载重复文件”能否新增一个“只看ID”？(强烈推荐做这个功能。)
目的是解决什么问题？
目前p站的小说和插画链接ID是分开计算的
插画ID的前面是artworks
小说ID的前面是novel
目前插画ID已经有9位数了，而小说ID只有8位数，
这样就导致了一个问题，当我设置了只下载大于某个ID的作品时，很多没下载过的小说也会错过无法下载。
目前的办法就只能在更多页面设置“不下载重复文件”，条件设为宽松，但是宽松条件也是需要同时查看ID和上传日期的，这样的话就需要每条链接都打开去看一下日期才行，这样没过一会儿就会出现429错误，容易封号，筛选效率也不高，如果能增加一个只看ID的选项，这样就可以直接通过链接的ID来判断，不需要打开链接了。
个人感觉新增一个“只看ID”这个功能更加实用，做起来应该也更加简单，因为说到底，设置这两个功能的目的无非都是不想要下载重复的作品罢了，设置成“只看ID”，就不需要去搜索已经下载过的作品的最大ID，然后去设置ID范围了，这样对使用者来说也更加方便，希望作者能新增这个选项。
其他软件是否有此类功能可以参考？

附加描述

[xuejianxianzun]

ID范围不区分插画和小说所导致的问题跟使用习惯有关吧，你是一直开着的？设计之初没想到这种情况，以后我区分一下吧。

至于“只看ID”，你的想法是在抓取时判断吧，这样做的问题是如果在第一次下载后，作者修改了这个作品的话，跳过 ID 就导致不会下载修改后的作品。我再考虑考虑。

[cxz32426]

ID范围不区分插画和小说所导致的问题跟使用习惯有关吧，你是一直开着的？这句话我没看懂是啥意思，我说一下我的情况吧。
我关注了一百多个作者，每隔一段时间(几个星期到几个月不等)我就会扫一遍这些作者的作品全部下载下来。最开始的时候，我会记录每次扫图的时间，下次扫图就从这个时间之后开始扫，后来p站开始限制扫图了，按照时间扫图的话需要每个作品的链接都打开看一下里面的时间，这样就会频繁返回429错误，需要很长的时间才能完成，后来我就换了一个办法，用*.*作为关键字搜索了我保存在电脑里的所有作品，因为我保存作品的时候都是用id_title的格式命名，所以搜索出所有文件之后再按照文件名排序就可以找到最大的id，下次扫图的时候就输入这个id，只下载比这个id大的作品就行了。
根据id扫图的方法我一直用到现在，一直没发现有什么问题，直到几天前我无意间用手机app看到p站里某个关注的作者更新了几部短篇小说，而这几部短篇小说的更新时间已经过了很久了，我却一点印象都没有，明明在此之前没多久我才扫过一次的，为什么没看过呢？打开电脑查找了对应作者文件里的作品之后，我确定这几篇小说确实没有下载下来。之后经过一番折腾，我这才发现小说id和插图id是分开计算的，最新的插图id已经达到了1亿多，而小说id只有1千万出头，于是我试着取消勾选只下载大于指定id的选项，不下载重复作品(条件设为宽松)则是继续勾选上，重新下载了一遍，从上午一直挂到晚上，期间经历了无数次429错误之后，终于在晚上下载完了，打开最新下载的内容，果然发现了那几部新的小说，心想着难道以后每次都要重头到尾扫一遍，经历无数次429错误才行吗？于是我就连忙来个作者提建议了。

关于“只看ID”的问题，我的意思是在原来的基础上增加这个选项，而不是把“宽松”替换成“ID”，也就是把原来的二选一改成三选一的模式，比如“严格”、“宽松”、“ID”这三个选项，给使用者多一个选择。
至于说作者修改作品后不会再次下载的问题，条件选择“宽松”不也会出现这个问题吗？既然如此，增加一个“ID”选项又何妨呢？更何况这只是新增的选项而已，担心错过作者修改作品的话仍然还是可以选择“严格”嘛。

新增“ID”选项还有一个作用，就是根据tag标签搜索作品下载的时候，有的作品很可能是几年前发布的，但是指定搜索的标签是最近才加上的，为了不错过这种作品，就不能勾选只下载大于某ID的选项，只能勾选不下载重复作品的选项，而目前不下载重复作品只有严格和宽松两个选项，所以每次根据tag下载作品的时候总是需要把所有作品链接都打开看一遍，还是会频繁返回429错误，以及容易被封号。
有鉴于此，我才强烈推荐在不下载重复功能中新增“ID”选项的，有了这个选项，把小说和插图id分开计算的功能也就意义不大了。
不过新增“ID”选项倒是有个小问题，就是小说和插图是分开算的，这样的话就有可能出现某部小说和某张插图的ID相同的情况，我看了下重复作品的保存文件记录，发现在里面的插图id都是id_p的格式，而小说只有单独一个id，这样看来的话应该还是可以区分开来的，因此新增“ID”选项还是很有可行性的。

[xuejianxianzun]

你理解错了，“宽松”判断的是ID+修改日期，作品修改后是会再次下载的。
因此，只判断 ID 没多大意义：

1. 这会导致作品修改后不会再次下载
2. 宽松已经完全覆盖了只判断 ID，而且由于再次修改的作品是少数，所以覆盖率相当高，没必要再添加只判断 ID。