This topic created in 3297 days ago, the information mentioned may be changed or developed.
上周周末写了一个腾讯漫画的爬虫....
现在已经有的功能:
1.查找漫画
2.查找出漫画的总章节数目
3.下载单话漫画
4.下载所有章节漫画(免费的括号笑)
目前存在的问题:
1.多线程下存在卡死或假死的状态(这块我是真的搞不懂了)
跪求大佬们教育,为什么会出现多线程下爬虫不爬了的情况啊 昨天我加了请求超时时间也还是会出现这种状况(昨天的修改没有上传 github)
代码地址:https://github.com/Fretice/Tencent_Cartoon_Download
注:请忽略 readme 文件中的内容,因为好多都写错了 /(ㄒoㄒ)/~~
Supplement 1 Apr 21, 2017
感谢大家的回复,也知道了自己的问题所在:
1. 命名规则不规范:如项目名称..当然我在 code 中的变量与方法名的命名规则上还是相对规范的
2.打包有问题,不应该上传 venv...写个 requirements.txt 就好
感谢各位前辈的指导,我一定会改正这些问题的.
1. 命名规则不规范:如项目名称..当然我在 code 中的变量与方法名的命名规则上还是相对规范的
2.打包有问题,不应该上传 venv...写个 requirements.txt 就好
感谢各位前辈的指导,我一定会改正这些问题的.
 | 1 nanlong Apr 20, 2017 还没见过这么打包 python 项目的，你是第一个 |
 | 4 zhihaofans Apr 20, 2017 via iPhone cartoon 是动画，漫画是 comic 。。。 |
| 5 zhihaofans Apr 20, 2017 via iPhone https://ooo.0o0.ooo/2017/04/20/58f836c6e9bbe.png |
 | 6 xvx Apr 20, 2017 via Android 腾讯卡通下载 |
 | 7 ty89 Apr 20, 2017  2 驼_峰_加_下_划_线_的_命_名_也_是_少_见 |
| 8 zhihaofans Apr 20, 2017 via iPhone @ty89 →PHP |
 | 9 Marfal Apr 20, 2017 .gitignore 老哥 |
 | 11 justtery OP 你们开心就好 注意哦，那只是个项目名称，注意看文件文件名称，更给力的说 |
 | 12 55555 Apr 20, 2017 以前有人这么干过 不过他是付费的都有了 然后被腾讯直接警告了 |
| 13 zhihaofans Apr 20, 2017 via iPhone 不是很懂 venv 目录下的是干嘛的，依赖？ |
 | 14 golmic Apr 20, 2017 via Android 哈哈，看评论就知道很欢乐 |
 | 15 irory Apr 20, 2017 和 LS 一样之前爬取过 qq 漫画 . 不过我只爬了海贼王的 . 共勉 http://irory.me/blog/8 |
 | 18 lauix Apr 20, 2017 |
 | 19 love4taylor PRO 中国惊奇先生...... 没有 .gitignore 啊 |
| 20 justtery OP @Love4Taylor 那个只是一个测试。。请忽略 |
 | 21 xuyl Apr 20, 2017 这种打包方式确实奇葩，你搞个 requirements.txt 不就行了？ |
 | 22 visylar Apr 20, 2017 pic_list_download 作为一个 shared variable 传入 13 个线程如果没有注意 atomic access ，应该会有很多 race condition ，所以会卡死或假死 |
 | 23 RqPS6rhmP3Nyn3Tm Apr 21, 2017 via iPhone 我当年也写过一个差不多的，不过你这打包方式真的奇特 |
 | 25 MyFaith Apr 21, 2017 看了一眼 venv 目录，还是不 star 了。 |
 | 26 Ixizi Apr 21, 2017 hhhhhhhh 厉害了 我的哥 |
Select Language