抓取tuigirl图片

下面是脚本之家 jb51.cc 通过网络收集整理的代码片段。

脚本之家小编现在分享给大家，也给大家做个参考。

import urllib.request
import re
import os
import sys
from collections import deque

if __name__ == "__main__":
    url = "http://www.tuigirl8.com/forum/view/"
    queue = deque()
    for i in range(1,2000):
        queue.append(url+str(i))
    cnt = 0
    while queue:
        url = queue.popleft()
        print(str(cnt)+url)
        cnt += 1
        targetDir = r"D:/%d"%cnt
        if not os.path.isdir(targetDir):
            os.mkdir(targetDir)
        req = urllib.request.Request(url)
        
        try:
            webpage = urllib.request.urlopen(req,timeout=2)
            contentBytes = webpage.read()
        except:
            continue
        linkre = re.compile(r'(http:[^s]*?(jpg|gif|png))')
        for link,t in linkre.findall(str(contentBytes)):
            print(link)
            pos = link.rindex('/')
            t = os.path.join(targetDir,link[pos+1:])
            urllib.request.urlretrieve(link,t)

以上是脚本之家(jb51.cc)为你收集整理的全部代码内容，希望文章能够帮你解决所遇到的程序开发问题。

如果觉得脚本之家网站内容还不错，欢迎将脚本之家网站推荐给程序员好友。

（编辑：安卓应用网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!