python实现爬取百度图片的方法示例_Python

python实现爬取百度图片的方法示例

2021-08-02 00:25双歧杆菌 Python

这篇文章主要介绍了python实现爬取百度图片的方法,涉及Python基于requests、urllib等模块的百度图片抓取相关操作技巧,需要的朋友可以参考下

本文实例讲述了python实现爬取百度图片的方法。分享给大家供大家参考，具体如下：

				?

									import json

									import itertools

									import urllib

									import requests

									import os

									import re

									import sys

									word=input("请输入关键字：")

									path="./ok"

									if not os.path.exists(path):

									  os.mkdir(path)

									word=urllib.parse.quote(word)

									url = r"http://image.baidu.com/search/acjson?tn=resultjson_com&ipn=rj&ct=201326592&fp=result&queryWord={word}&cl=2&lm=-1&ie=utf-8&oe=utf-8&st=-1&ic=0&word={word}&face=0&istype=2nc=1&pn={pn}&rn=60"

									urls=(url.format(word=word,pn=x)for x in itertools.count(start=0,step=60))

									index=0

									str_table = {

									  '_z2C$q': ':',

									  '_z&e3B': '.',

									  'AzdH3F': '/'

									}

									char_table = {

									  'w': 'a',

									  'k': 'b',

									  'v': 'c',

									  '1': 'd',

									  'j': 'e',

									  'u': 'f',

									  '2': 'g',

									  'i': 'h',

									  't': 'i',

									  '3': 'j',

									  'h': 'k',

									  's': 'l',

									  '4': 'm',

									  'g': 'n',

									  '5': 'o',

									  'r': 'p',

									  'q': 'q',

									  '6': 'r',

									  'f': 's',

									  'p': 't',

									  '7': 'u',

									  'e': 'v',

									  'o': 'w',

									  '8': '1',

									  'd': '2',

									  'n': '3',

									  '9': '4',

									  'c': '5',

									  'm': '6',

									  '0': '7',

									  'b': '8',

									  'l': '9',

									  'a': '0'

									}

									i=1

									char_table = {ord(key): ord(value) for key, value in char_table.items()}

									for url in urls:

									  html=requests.get(url,timeout=10).text

									  a=re.compile(r'"objURL":"(.*?)"')

									  downURL=re.findall(a,html)

									  for t in downURL:

									    for key, value in str_table.items():

									        t = t.replace(key, value)

									    t=t.translate(char_table)

									    try:

									      html_1=requests.get(t)

									      if str(html_1.status_code)[0]=="4":

									        print('失败1')

									        continue

									    except Exception as e:

									      print('失败2')

									      continue

									    with open(path+"/"+str(i)+".jpg",'wb') as f:

									      f.write(html_1.content)

									    i=i+1