python动漫之家爬虫

这个显卡不太冷 发表于 2020-3-9 14:43:15

[md]昨晚上还在看的漫画，

今天起床就被下架了，

太惨了


用python写了个爬虫，

能通过API看到的漫画，

就能爬



```py
import requests
import json
import os, re
BASEDIR = os.getcwd()
comicId = 7474 # 填漫画的ID
headers = {'Referer':'http://images.dmzj.com/'}
comicInfo = requests.get("http://v2.api.dmzj.com/comic/%d.json"%comicId).content
comicInfo = json.loads(comicInfo)
chapters = comicInfo['chapters'][0]['data']
for chapter in chapters:

cId = chapter['chapter_id']
cTitle = chapter['chapter_title']
cOrder = chapter['chapter_order']

cdir = BASEDIR + '/%s'%cTitle
if not os.path.exists(cdir):
os.makedirs(cdir)

print("%s create folder %s"%(cTitle, cdir))

chapterInfo = requests.get("http://v2.api.dmzj.com/chapter/%d/%d.json"%(comicId, cId)).content
chapterInfo = json.loads(chapterInfo)
for page in chapterInfo['page_url']:
match = re.search('(\d+).jpg', page)
print(match.group(1))
res = requests.get(page, headers=headers)
pic = open(cdir + '/%s.jpg'%match.group(1), 'wb')
for chunk in res.iter_content():
pic.write(chunk)
pic.close()

# res = requests.get("http://imgsmall.dmzj.com/w/7474/27922/0.jpg", headers=headers)
# pic = open('t/pic.jpg', 'wb')
# for chunk in res.iter_content():
# pic.write(chunk)
# pic.close()
```

没有多线程，凑活着用。86话爬三分钟。
[/md]

nkc3g4 发表于 2020-3-10 05:22:45

这个显示器好大

ZhanBE 发表于 2020-3-10 15:04:18

厉害

crazyleo 发表于 2020-3-10 16:21:57

硬核！

这个显卡不太冷 发表于 2020-3-10 17:36:41

nkc3g4 发表于 2020-3-10 05:22
这个显示器好大

27寸的

wjia 发表于 2021-4-2 05:53:11

好玩吗。。。。

xiaohu96 发表于 2021-4-3 08:54:31

打开论坛首页看到这个截图，还以为是什么漫画呢

cmd 发表于 2021-4-8 17:50:26

彩色代码是怎么发的

来源: 萝卜头IT论坛 查看完整版本