dht爬虫终于有眉目了

Posted by 0x55aa Posted on 2013-10-05 20:48:30 12 COMMENT
从看了小虾的博文以后就也想写一个爬虫，一直写到现在才有点眉目。。其中还参考了http://codemacro.com上写的思路，不过有很多功能还没涉及到。 已经实现的功能，创建一个节点，能在dht网络中友好的生存并获取info_hash，好多技巧还没用到。实现插入数据库中，现在直接访问django写的应用（主要也是测试功能，两个功能分开了还没合到一起，直接用django的orm肯定要快好多），然后我在django里边写了下载种子文件和解析种子文件信息的功能。发现有许多hash找不到种子，下载不下来，后面还要在看一下怎么生成种子文件。分析种子信息的代码是从网上找的，然后修改了一下。 一个节点可能有点偏，不计算重复，开始时平均一分钟2个，计算重复一份钟一个。 前段时间又想到以前看群里讨论的关于p2p的应用，想自己实现一下，正好现在对协议了解了。不准备用 python写了，再看一个新语言折腾一下。

上一篇:
下一篇:

相关文章：

Categories: 博客记录

12 Responses so far.

  1. dis 说：
    2014-02-04 16:52:16

    说好的呢.

    回复
  2. RR 说：
    2014-01-31 12:55:45

    同求看了 小虾的博客同研究

    回复
  3. sou-pian 说：
    2015-06-10 21:40:40

    磁力搜索网站：www.sou-pian.com

    回复
  4. 0X55AA 说：
    2015-06-15 11:34:47

    http://bajiaoxiyu.com/ 二三百万的资源了

    回复
  5. 0X55AA 说：
    2014-02-08 16:47:03

    https://github.com/0x55aa/python_dht

    回复
  6. 0X55AA 说：
    2014-02-08 16:48:46

    https://github.com/0x55aa/python_dht 刚上传的0 0现在都 上班了。我修改了很多东西，不一定合理，你看有用的就学习一下吧，下载bt文件的我没做好，分析的写完了。放在与web页面一起的应用了，那个很简单就不上传了

    回复
  7. aaa 说：
    2014-04-22 16:25:19

    alert("test");

    回复
  8. dis 说：
    2014-01-17 13:33:24

    最近也研究，求份python——dht源码参考,谢谢你

    回复
  9. good 说：
    2015-11-24 10:52:08

    只是一个空白页了。。。

    回复
  10. good 说：
    2015-11-24 10:52:39

    此网址 http://bajiaoxiyu.com/

    回复
  11. 0X55AA 说：
    2015-11-24 16:22:58

    关了，国外版权审核太严重，有些mp3的分享违反版权了。

    回复
  12. 0X55AA 说：
    2014-01-21 09:35:08

    好 过几天我传网上， 等放假吧，现在没时间

    回复

Leave a Reply