Forum

做了一个sukebei.nyaa爬虫a...
 
通知中心
Clear all

[已经关闭] 做了一个sukebei.nyaa爬虫api

17
3 Users
4 Reactions
4,580 查看
帖子: 231
帖子发起者
(@sasdas)
Eminent Member
已加入: 4 年 前

假如我想搜“鋼鉄の魔女”按照下面格式搜索

http://202.5.17.225/search?search=鋼鉄の魔女

返回和nyaa自带的rss很像,返回下载地址和磁力地址,专门方便被墙的兄弟快速下载

<category>Art - Anime</category>  类型
<title>鋼鉄の魔女 アンネローゼ/Koutetsu no Majo Annerose [1080p][10bit][English Subbed]</title> 标题
<href>/view/3206897</href> 网站实际地址
<torrent>/download/3206897.torrent</torrent> 种子下载地址
<magnet>...</magnet> 磁力地址
<size>2.8 GiB</size> 文件大小
<date>2020-12-21 06:46</date> 日期
<seeders>64</seeders> 当前文件源个数
<leechers>41</leechers> 当前下载源个数
<completed>763</completed> 当前完成个数
 
太晚了,不想该主页了,我要睡觉了,这个权当测试
 
16 Replies
帖子: 4727
(@lpofficial)
Honorable Member
已加入: 6 年 前

开源吗

1 Reply
(@sasdas)
已加入: 4 年 前

Eminent Member
帖子: 231

@liulipack 这代码漏洞百出,写成这吊样,我敢开源?不说了,我睡觉了,真的不行了

帖子: 231
帖子发起者
(@sasdas)
Eminent Member
已加入: 4 年 前

如果输入为空会触发debug(忘关了)。缓存文件也设置清理,在说吧

5 Replies
(@sasdas)
已加入: 4 年 前

Eminent Member
帖子: 231

暂时默认只能爬取sukebei,实际上只要是nyaa类网站都可以,反正在说吧,然后为了让竟可能多的人测试,以及担心我那个1核心750mb服务器崩溃所以,限制了显示页面,现在默认只能显示1页

(@lpofficial)
已加入: 6 年 前

Honorable Member
帖子: 4727

@sasdas 搞个 Nginx 反代就好了吧

(@sasdas)
已加入: 4 年 前

Eminent Member
帖子: 231

@liulipack 想多了,这东西拿flask做的,代码就10行,主代码全是爬虫

(@sasdas)
已加入: 4 年 前

Eminent Member
帖子: 231

@liulipack 想多了,这东西拿flask做的,代码就10行,主代码全是爬虫

(@lpofficial)
已加入: 6 年 前

Honorable Member
帖子: 4727

@sasdas 我反而觉得反代更方便。

帖子: 1568
(@woyaokaiche)
Estimable Member
已加入: 4 年 前

弄个搜索框吧..+磁力按钮也不错..

7 Replies
(@lpofficial)
已加入: 6 年 前

Honorable Member
帖子: 4727

@woyaokaiche qBittorrent 突然提示我读写错误,"强制重新校验"之后... 我做种的《罗小黑战记》、《我想吃到你的胰脏》、《十万个冷笑话》还有《日本沉没2020 OST》之类的的都没了!
我不管,我不管,哆啦 kai 梦,帮帮我嘛

 

(@woyaokaiche)
已加入: 4 年 前

Estimable Member
帖子: 1568

@liulipack I/O读写错误的提示?那个是硬盘可能塞满了,

你这个情况我感觉有点麻烦.....,

源文件可能还在你自己去目录下找找,提出来换另一个目录来储存,保存那些缺失的磁力链接,然后通通指向那个目录,别开始下载,使用强制重新校验,又可以读档了.

(@lpofficial)
已加入: 6 年 前

Honorable Member
帖子: 4727

@woyaokaiche 你说晚了,等吧

我下一步计划有几个方案:

买 LTO 磁带和 LTO 磁带机,但磁带机太贵;
买机械硬盘,但就怕做手工活的时候碰坏;
堆固态,虽然没有 LTO 磁带机贵,但比机械贵。

(@woyaokaiche)
已加入: 4 年 前

Estimable Member
帖子: 1568

@liulipack  我可能out了,

另外,国内上传卖的昂贵,如果能话200~250块钱/月 租到 300Mbp 33MBit/s的带宽,我才感兴趣..

你说的这些都没考虑过.主要是网速不快,在流媒体时代,上传太决定质量了,我在等下一个十年

(@lpofficial)
已加入: 6 年 前

Honorable Member
帖子: 4727

@woyaokaiche 专线才是你的“归宿”。

(@sasdas)
已加入: 4 年 前

Eminent Member
帖子: 231

@woyaokaiche 这是api,你家api带搜索框和按钮的?

(@lpofficial)
已加入: 6 年 前

Honorable Member
帖子: 4727

@sasdas 可以搞个索引页。