#1 - 2018-1-20 18:38
铃猫
http://mirror.bgm.rincat.ch/
https://mirror.bgm.rincat.ch/

以及API
http://mirror.api.bgm.rincat.ch/
https://mirror.api.bgm.rincat.ch/

API地址更新 2021-04-29

API更新缓存6h,页面缓存1d。

不支持POST,不支持登陆(bgm24)
#2 - 2018-1-20 18:43
(意识形态的水很深 你把握不住)
(bgm38)
#3 - 2018-1-20 18:48
(Inconsistency is intoxicating)
删除了回复
#3-1 - 2018-9-17 07:47
#4 - 2018-1-20 18:58
(宅男会虚构虚构老婆倒贴给虚构自己这件事究竟有什么错)
这个可以,建议全局置顶 (bgm38)
#5 - 2018-1-20 19:03
(advaita)
太逼真了!
#5-1 - 2018-1-21 02:51
Dimpurr
可谓是迫真了 (bgm38)
#6 - 2018-1-20 19:16
(DD雷达搜寻中...?)
lz能设置一下 'Access-Control-Allow-Origin' 响应头就更好了
我用js原生api有跨域限制(bgm38)
加"bangumi.tv"和"bgm.tv"就行了
#6-1 - 2018-1-20 19:30
铃猫
这个东西似乎只能加一个域名?(bgm38)
#6-2 - 2018-1-20 19:32
铃猫
我改成*了
#6-3 - 2018-1-20 19:38
頂上ノ月🌙
MagicFish1990一边吃草一边 说: 这个东西似乎只能加一个域名?
本来想说在这二选一
但看到已经设置成"*"了(bgm38)
#7 - 2018-1-20 19:26
建议主页开个条幅写个“爬虫都滚进来看”
#8 - 2018-1-20 19:44
(想和可爱的纸片小男孩贴贴)
有趣(bgm95)
#8-1 - 2018-1-20 21:07
发光的球
希望再镜像下api.bgm.tv,就更完美了。
还有听说.cat要有加泰隆尼亚语的页面,所以是真的假的
#8-2 - 2018-1-20 21:22
铃猫
发光的球 说: 希望再镜像下api.bgm.tv,就更完美了。
还有听说.cat要有加泰隆尼亚语的页面,所以是真的假的
api也要(bgm38)
这个用的不多吧
#8-3 - 2018-1-20 21:26
铃猫
发光的球 说: 希望再镜像下api.bgm.tv,就更完美了。
还有听说.cat要有加泰隆尼亚语的页面,所以是真的假的
加了
cat确实要加泰隆尼亚语的页面(bgm38)
#9 - 2018-1-20 20:28
一万个赞!
#10 - 2018-1-21 01:40
(Q, Σ, Γ, δ, q0, Z0, F)
好。
#11 - 2018-1-21 02:20
(A.T.Field)
喷了……你怎么这么闲,来吃鸡啊(bgm38)
#11-1 - 2018-1-21 02:58
铃猫
这两天都快困死了(bgm38)
#11-2 - 2018-1-21 03:26
ForsakenRei
MagicFish1990一边吃草一边 说: 这两天都快困死了
昨天我们打菜鸡局各种吃鸡……还遇到了野生的绿风(bgm38)
#11-3 - 2018-1-21 03:51
铃猫
ForsakenRei 说: 昨天我们打菜鸡局各种吃鸡……还遇到了野生的绿风
看到了,然后绿丰一直打查理(bgm38)
#11-4 - 2018-1-21 03:58
ForsakenRei
MagicFish1990一边吃草一边 说: 看到了,然后绿丰一直打查理
那局太逗了233
#12 - 2018-1-21 02:23
(bgm38)思路很棒
#13 - 2018-1-21 12:00
(想像力こそが、すべてを変える)
建议sai老板发全站站内信(bgm38)
#14 - 2018-9-17 06:23
(天生万物以养人,人无一物以报天)
能不能启用一下brotil压缩(bgm93)
#14-1 - 2018-9-17 06:33
铃猫
gzip不够你用的吗(bgm38)
#14-2 - 2018-9-17 06:47
bangumi大西王
MagicFish1990一边吃草一边 说: gzip不够你用的吗
我爬的时候微妙的处于只有带宽跑满的状态…

仔细一想也许意义并不大,是我唐突了(
#14-3 - 2018-9-17 07:01
铃猫
Trim21 说: 我爬的时候微妙的处于只有带宽跑满的状态…
好了(bgm38)
#14-4 - 2018-9-17 07:02
bangumi大西王
MagicFish1990一边吃草一边 说: 好了
感谢…
#14-5 - 2018-9-17 07:21
铃猫
Trim21 说: 感谢…
ngx_brotli doesn't re-compress already compressed responses, so if it's gzipped before reaching nginx, it will be passed to the client as such. (bgm38)
#14-6 - 2018-9-17 07:28
bangumi大西王
MagicFish1990一边吃草一边 说: ngx_brotli doesn't re-compress already compressed responses, so if it's gzipped before reaching ngin...
噗…造化弄人
#14-7 - 2018-9-17 07:28
bangumi大西王
MagicFish1990一边吃草一边 说: ngx_brotli doesn't re-compress already compressed responses, so if it's gzipped before reaching ngin...
突然好奇,你是怎么绕过bgm本身的频率限制的
#14-8 - 2018-9-17 07:31
铃猫
Trim21 说: 噗…造化弄人
我关掉了和主服务器的压缩,现在是br了(bgm38)
#14-9 - 2018-9-17 07:39
bangumi大西王
MagicFish1990一边吃草一边 说: 我关掉了和主服务器的压缩,现在是br了
现在是502了(bgm38)
#14-10 - 2018-9-17 07:43
铃猫
Trim21 说: 现在是502了
现在好了(bgm38)
#14-11 - 2018-9-17 22:55
bangumi大西王
MagicFish1990一边吃草一边 说: 现在好了
我又来报bug了(

/subject/3 会转跳到 /subject/1836

然后对于api, api.bgm.tv/subject/3应该转跳到api.bgm.tv/subject/1836
但是镜像站里,  /api/subject/3 转跳到了 /subject/1836
#14-12 - 2018-9-17 23:15
铃猫
Trim21 说: 我又来报bug了(

/subject/3 会转跳到 /subject/1836

然后对于api, api.bgm.tv/subject/3应该转跳到api.bgm.tv/subject/1836
...
hmmmm,这个似乎不太好改
#14-13 - 2018-9-17 23:24
bangumi大西王
MagicFish1990一边吃草一边 说: hmmmm,这个似乎不太好改
开一个mirror.api.bgm.rin.cat的域名(
#14-14 - 2018-9-18 02:05
铃猫
Trim21 说: 开一个mirror.api.bgm.rin.cat的域名(
加了(bgm38)
#14-15 - 2018-9-18 02:09
bangumi大西王
MagicFish1990一边吃草一边 说: 加了
主站镜像是不是跟着也一块改了…(
/变成了json响应
#14-16 - 2018-9-18 02:45
铃猫
Trim21 说: 主站镜像是不是跟着也一块改了…(
/变成了json响应
cache冲突,现在好了(
#15 - 2018-9-17 07:48
(BGMのTrinitas<=>婊冈妈<=>补冈妈<=>拜冈妈 三位一体 ...)
终于有了,可喜可贺(bgm38)
#16 - 2019-1-8 04:38
(天生万物以养人,人无一物以报天)
LE的证书过期啦...
#16-1 - 2019-1-9 06:44
铃猫
好了(bgm38)
#17 - 2019-4-10 17:18
(もうぅ!プラチナむかつく!)
又过期啦
#18 - 2019-5-7 02:36
(Don't feel. Think.)
404了(bgm38)(bgm38)
#18-1 - 2019-5-7 02:39
bangumi大西王
api域名没有path的情况下就是404
你试试这个https://mirror.api.bgm.rin.cat/subject/1
#18-2 - 2019-5-7 03:43
Rivers
Trim21 说: api域名没有path的情况下就是404
你试试这个https://mirror.api.bgm.rin.cat/subject/1
原来是这么玩的
#19 - 2019-7-23 01:06
(hhh汝视视汝)
系统自动mark (bgm102)
#20 - 2019-8-25 13:32
Azure 52.183.76.X 是哪位,爬的太快全是502不能少开点线程吗(bgm38)
检查到 header 里 X-Cache 是MISS就慢点(bgm39)
#20-1 - 2019-9-21 22:18
两倍速与→
以为是我,但看了下时间发现不是(bgm99)
顺便小声问一句,差不多两秒一页算快吗(bgm27)
#20-2 - 2019-9-22 00:29
bangumi大西王
两倍速与→ 说: 以为是我,但看了下时间发现不是
顺便小声问一句,差不多两秒一页算快吗
两秒一页直接爬源站都不会被封…
#20-3 - 2019-9-22 00:58
ekibun
Trim21 说: 两秒一页直接爬源站都不会被封…
!爬源站会封吗我都没设timeout(bgm38)
#20-4 - 2019-9-22 01:10
bangumi大西王
ekibun 说: !爬源站会封吗我都没设timeout
短时间内大量请求不是会被封一段时间的吗…
#20-5 - 2019-9-22 01:11
bangumi大西王
Trim21 说: 短时间内大量请求不是会被封一段时间的吗…
难道你没中过
#20-6 - 2019-9-22 01:27
ekibun
Trim21 说: 难道你没中过
没遇到过,
我是顺序请求的可能不算同时?快的时候好像也有过一秒十几条的样子
#20-7 - 2019-9-22 01:31
bangumi大西王
ekibun 说: 没遇到过,
我是顺序请求的可能不算同时?快的时候好像也有过一秒十几条的样子
就是比如请求/subject/1 /subject/2这样子也可能会碰到。不太清楚具体限制规则是怎么样不过的确有这样的规则…
#21 - 2021-1-3 20:38
mark
#22 - 2021-1-7 15:37
好東西,感謝
不過有個小問題:使用api的「条目搜索」時,常常會導引到顯示「对不起,您在 秒内只能进行一次搜索......(以下略」的網頁
原本以為是搜尋間隔太短,但就算我等幾分鐘再試也是一樣的結果
同樣的關鍵字丟到官方api就會是正常的結果,但我基於種種原因不大想用...請問以上提到的這個問題有辦法解決嗎?
#22-1 - 2021-1-9 02:33
铃猫
并不支持搜索
#23 - 2021-1-9 13:58
(ユーフェミア·リ·ブリタニア/Euphemia Li Britannia)
Mark
#24 - 2021-1-12 08:23
(资深致郁番粉。)
mark( •́ฅ•̀ )
#25 - 2021-2-6 15:32
mark
#26 - 2021-2-18 00:51
可以介绍下是如何镜像的吗?
#27 - 2021-2-25 12:09
(hhh汝视视汝)
我也想知是如何镜像的,最近有另外个站想镜像(bgm38)

这个镜像是只用了nginx吗?

我想要的是那种.. 能旁路把URL+资源保存一份的
#27-1 - 2021-2-25 12:17
铃猫
这个并不是用来离线使用的(bgm38),你需要专门的爬虫来抓资源
#27-2 - 2021-2-25 12:32
ouoω
铃猫 一边吃🥗一边 说: 这个并不是用来离线使用的,你需要专门的爬虫来抓资源
这个 知
我自己想镜像的那个站是个http api。想象是自己开个带旁路保存的反向代理,通过这个代理访问,同时把自己用到的(用过的)资源保存一份
不知和你的bgm镜像类似吗?
#27-3 - 2021-2-25 12:44
铃猫
rnono 说: 这个 知
我自己想镜像的那个站是个http api。想象是自己开个带旁路保存的反向代理,通过这个代理访问,同时把自己用到的(用过的)资源保存一份
不知和你的bgm镜像类似吗?
nginx这缓存是hash过的
你这个需求不如用 https://mitmproxy.org/
#27-4 - 2021-2-25 14:03
ouoω
铃猫 一边吃🥗一边 说: nginx这缓存是hash过的
你这个需求不如用 https://mitmproxy.org/
(bgm39)
#28 - 2021-6-15 18:27
mark
#29 - 2021-9-24 21:53
(二阶堂芽爱 小河坂青空)
还是不能访问水面之下必须登录的R-18的条目页面和封面(bgm38)大佬可以解决嘛?
用api有些信息获取不到,比如作品的“别名”(bgm38)
#29-1 - 2021-9-24 22:31
铃猫
那你需要自己登录才能用啊(
#30 - 2022-2-17 20:31
大佬, 为什么里番信息爬不了啊, (bgm42), 想搞一个刮削器整一个媒体库来着, 不知道为什么, 用cookies登录了还是返回空数据
#30-1 - 2022-2-21 05:07
铃猫
因为不给登录啊(
#31 - 2022-3-4 10:19
大佬你这也太快了(bgm39)想找5分钟之前被删掉的图片结果发现已经是新版本了……(捂脸
#32 - 2022-4-15 12:34
(chanceyan)
mark
#33 - 2022-7-14 21:31
mark
#34 - 2022-10-4 17:37
(Enjoy your (real) life!)
Hi 我想问一下最近有没有发现大量的 502 错误?
#34-1 - 2022-10-4 17:38
铃猫
现在应该是429了(
#34-2 - 2022-10-4 17:43
Genius🌟小乖💯
铃猫 说: 现在应该是429了(
雀食。我应该调低爬取速度吗,不过我这个月并没有改变配置,为什么上个月就没有这种问题呢?
#34-3 - 2022-10-4 17:47
铃猫
Genius🌟小乖💯 说: 雀食。我应该调低爬取速度吗,不过我这个月并没有改变配置,为什么上个月就没有这种问题呢?
并不是因为你爬,而是主站在被爬带不动(
#34-4 - 2022-10-4 17:48
Genius🌟小乖💯
铃猫 说: 并不是因为你爬,而是主站在被爬带不动(
☹️
#34-5 - 2022-10-4 17:50
铃猫
Genius🌟小乖💯 说: ☹️
你可以根据返回的代码判断:
429:cache过期但是访问主站频率太快,你可以稍后重试
503:主站挂了
#35 - 2023-1-31 03:34
网站貌似挂了?(bgm38)主页内容停留在很久以前,点什么链接都是502
#35-1 - 2023-1-31 06:33
铃猫
被爬炸了,主站有限流(
#35-2 - 2023-1-31 22:28
1ra
铃猫 说: 被爬炸了,主站有限流(
那咋办,是不是以后都不能用了😭
#36 - 2023-1-31 08:53
mark
#37 - 2023-1-31 15:40
这是没了吗?(bgm43)(bgm43)