#1 - 2021-6-28 22:09
gyro永不抽风
写了个爬虫，然后在爬动画id列表的时候，理论上应该有760(页)*24(行)+11 = 18251条数据

然而无论跑多少次，都只有18247条数据。花费数小时排查完代码问题后，怀疑是数据源的问题。特意打印出了日志，最终发现确实是数据源有重复。

以下为重复subject id: 110922, 161939, 258944, 274

下面是重复页面：
110922 サイボーグ009 人造人009 剧场版:
https://bgm.tv/anime/browser/?sort=title&page=342
https://bgm.tv/anime/browser/?sort=title&page=343

161939 ぼのぼの 暖暖日记:
https://bgm.tv/anime/browser/?sort=title&page=284
https://bgm.tv/anime/browser/?sort=title&page=285

258944 一寸法師 一寸法师:
https://bgm.tv/anime/browser/?sort=title&page=444
https://bgm.tv/anime/browser/?sort=title&page=445

274 Kanon:
https://bgm.tv/anime/browser/?sort=title&page=88
https://bgm.tv/anime/browser/?sort=title&page=89