搞了一个磁力链接的爬虫,有兴趣的可以自己跑跑看
发布于 2天前 作者 keenwon 268 次浏览 来自 分享

学习nodejs,顺便写来玩玩的,可以抓取dht网络里活跃的资源,也就bt下载的资源。
爬虫在一台1核1G的VPS上跑了几个月了,目前收集到300W+资源。
成品地址http://findit.so
Github地址https://github.com/keenwon/antcolony

12 回复

必须点赞。

赞,貌似搜索页的源码不在这里么

@luicfer 对的,这个只是爬虫,搜索的部分没什么技术含量,Express.js做个简单的站点就好了,Elasticsearch有nodejs的客户端程序,很方便的。

@luicfer 而且目前 http://findit.so 的功能比较简单。但是只要能爬到数据,不管用什么语言、设计什么功能、玩什么创意,都是可以的,看想象力了。

对于大牛们,我只能欣然点赞

真的很牛逼啊,学了nodejs这么久,都没有脑子去做这种东西

现在出现个蛋疼的问题,mongodb一不小心已经15G了,VPS总空间才20G左右,硬盘剩余不足5%。 打算新开一个更大的vps转移一下数据,有什么好方法,再不停机的情况下以最快的速度搞定?

赞,最近我也在看DHT的东西~~~

楼主简直淫才啊,造福广大淫民群众

我擦。。。楼主真的太牛了。。。。必须点赞!

回到顶部