shuiqukeyou / e-hentaicrawler Goto Github PK

在 E-HentaiCrawler/database/newdatabase 目录中，执行 python3.6 new_datatable.py 后报错如下：

Traceback (most recent call last):
  File "new_datatable.py", line 2, in <module>
    from database.link_database import link_database
ModuleNotFoundError: No module named 'database'

小白求教...

1. 需要安装的包描述太少了，pip install requests pymysql bs4
2. 建表的语句是错的，一堆verchar应该是varchar
3. config中的TARGET里有个字符串没加引号

最后没跑起来的原因是macOS上python3的qi.qsize()是不能用的……我只是想做一些数据上的分析，你能不能直接dump一个最新的数据表给我算了，可以的话我单独和你联系……

如果我从browser把cookie复制出来，然后爬虫发送的时候放到header就行了？

配置后无法运行源代码，提示如下：
Traceback (most recent call last):
File "E:/BLMYX/Python/E-HentaiCrawler/Proxy/IPPool.py", line 85, in getip_from_pool
timeout = 5).json()[0]
IndexError: list index out of range
经过调试，发现是IPPool.py中getip_from_pool()函数返回调用requests函数传入的URL参数有误，删除网址后边多出的空格即可。（楼主大大可以调一下？哇这边初学者研究了好久orz