站酷海洛网图片爬虫

站酷海洛网图片爬虫本文介绍如何利用 Python 进行站酷海洛网的图片爬取 包括解析网页结构 设置请求参数和保存图片等内容 涉及网络请求库和文件操作技术

大家好,欢迎来到IT知识分享网。

# -*- coding:utf-8 -*- import os import requests import urllib from pyquery import PyQuery import uuid from pypinyin import pinyin import unicodedata headers = { "User-Agent": "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome" "/75.0.3770.142 Safari/537.36" } def href_url_download(): # 1.填写要爬取关键词的list.txt keyword_list = open("list.txt", 'r', encoding='utf-8') lines = keyword_list.readlines() keyword_list.close() for keyword in lines: keyword = keyword.strip() print(keyword) # ------------------------汉字转化成拼音------------------------------------- # word = pinyin(keyword) # pin_yin = "".join(str(i[0]) for i in word) # print(pin_yin) # res = unicodedata.normalize('NFKD', pin_yin).encode('ascii', 'ignore').decode("ascii") 

免责声明:本站所有文章内容,图片,视频等均是来源于用户投稿和互联网及文摘转载整编而成,不代表本站观点,不承担相关法律责任。其著作权各归其原作者或其出版社所有。如发现本站有涉嫌抄袭侵权/违法违规的内容,侵犯到您的权益,请在线联系站长,一经查实,本站将立刻删除。 本文来自网络,若有侵权,请联系删除,如若转载,请注明出处:https://haidsoft.com/104230.html

(0)

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注微信