import?requests
from?lxml?import?etree
import?urllib.parse
headers?=?{
????‘User-Agent‘:‘Mozilla/5.0?（Windows?NT?10.0;?WOW64）?AppleWebKit/537.36?（KHTML?like?Gecko）?Chrome/64.0.3282.204?Safari/537.36‘
}
url?=?“https://www.aqistudy.cn/historydata/“
response?=?requests.get（url?headers=headers）
text?=?response.content.decode（‘utf-8‘）
html?=?etree.HTML（text）
city_set?=?list（）
citys?=?html.xpath（“//div[@class=‘a(chǎn)ll‘]/div/ul“）
for?city?in?citys:
????messages?=?city.xpath（“.//li“）
????for?message?in?messages:
????????city_name?=?message.xpath（“.//a/text（）“）
????????city_name?=?““.join（city_name）
????????city_set.append（city_name）
print（city_set）

import?time
from?urllib?import?parse
import?pandas?as?pd
from?selenium?import?webdriver
driver?=?webdriver.PhantomJS（r‘E:\\Tools\\phantomjs-2.1.1-windows\\bin\\phantomjs.exe‘）
base_url?=?‘https://www.aqistudy.cn/historydata/monthdata.php?city=‘
for?k?in?range（0len（city_set））:
????city?=?city_set[k]
????print（city）
????weburl?=?（‘%s%s‘?%?（base_url?parse.quote（city）））
????print（weburl）
????driver.get（weburl）
????time.sleep（1）
????dfs?=?pd.read_html（driver.page_sourceheader=0）[0]
????time.sleep（0.5）
????dfs.to_csv（r‘E:\\Data\\%s.csv‘%?（str（city））mode=‘a(chǎn)+‘encoding=‘utf_8_sig‘）
driver.quit（）
print?（‘done‘）

?屬性????????????大小?????日期????時(shí)間???名稱
-----------?---------??----------?-----??----
?????目錄???????????0??2020-09-04?22:31??空氣質(zhì)量歷史數(shù)據(jù)\
?????文件??????????61??2020-09-04?21:36??空氣質(zhì)量歷史數(shù)據(jù)\0萬(wàn)寧.csv
?????文件??????????61??2020-09-04?21:27??空氣質(zhì)量歷史數(shù)據(jù)\0東方.csv
?????文件??????????61??2020-09-04?21:31??空氣質(zhì)量歷史數(shù)據(jù)\0臨高.csv
?????文件??????????61??2020-09-04?21:31??空氣質(zhì)量歷史數(shù)據(jù)\0樂(lè)東.csv
?????文件??????????61??2020-09-04?21:37??空氣質(zhì)量歷史數(shù)據(jù)\0五指山.csv
?????文件??????????61??2020-09-04?21:26??空氣質(zhì)量歷史數(shù)據(jù)\0保亭.csv
?????文件??????????61??2020-09-04?21:28??空氣質(zhì)量歷史數(shù)據(jù)\0儋州.csv
?????文件??????????61??2020-09-04?21:27??空氣質(zhì)量歷史數(shù)據(jù)\0定安.csv
?????文件??????????61??2020-09-04?21:35??空氣質(zhì)量歷史數(shù)據(jù)\0屯昌.csv
?????文件??????????61??2020-09-04?21:36??空氣質(zhì)量歷史數(shù)據(jù)\0文昌.csv
?????文件??????????61??2020-09-04?21:27??空氣質(zhì)量歷史數(shù)據(jù)\0昌江.csv
?????文件??????????61??2020-09-04?21:27??空氣質(zhì)量歷史數(shù)據(jù)\0澄邁.csv
?????文件??????????61??2020-09-04?21:34??空氣質(zhì)量歷史數(shù)據(jù)\0瓊中.csv
?????文件??????????61??2020-09-04?21:33??空氣質(zhì)量歷史數(shù)據(jù)\0瓊海.csv
?????文件??????????70??2020-09-04?21:38??空氣質(zhì)量歷史數(shù)據(jù)\0白沙.csv
?????文件??????????61??2020-09-04?21:32??空氣質(zhì)量歷史數(shù)據(jù)\0陵水.csv
?????目錄???????????0??2020-09-05?11:10??空氣質(zhì)量歷史數(shù)據(jù)\demo\
?????文件????????1298??2020-09-04?21:40??空氣質(zhì)量歷史數(shù)據(jù)\demo\demo.py
?????文件????????1610??2020-09-04?21:35??空氣質(zhì)量歷史數(shù)據(jù)\demo\ghostdriver.log
?????文件?????????126??2020-09-05?11:10??空氣質(zhì)量歷史數(shù)據(jù)\demo\請(qǐng)先讀讀我QAQ.txt
?????文件????????3596??2020-09-04?21:34??空氣質(zhì)量歷史數(shù)據(jù)\七臺(tái)河.csv
?????文件????????3301??2020-09-04?22:07??空氣質(zhì)量歷史數(shù)據(jù)\三亞.csv
?????文件????????3504??2020-09-04?21:34??空氣質(zhì)量歷史數(shù)據(jù)\三明.csv
?????文件????????4061??2020-09-04?22:07??空氣質(zhì)量歷史數(shù)據(jù)\三門峽.csv
?????文件????????4121??2020-09-04?21:34??空氣質(zhì)量歷史數(shù)據(jù)\上海.csv
?????文件????????2974??2020-09-04?22:07??空氣質(zhì)量歷史數(shù)據(jù)\上饒.csv
?????文件????????4204??2020-09-04?21:27??空氣質(zhì)量歷史數(shù)據(jù)\東莞.csv
?????文件????????4641??2020-09-04?21:28??空氣質(zhì)量歷史數(shù)據(jù)\東營(yíng).csv
?????文件????????3091??2020-09-04?22:13??空氣質(zhì)量歷史數(shù)據(jù)\中衛(wèi).csv
?????文件????????4107??2020-09-04?21:39??空氣質(zhì)量歷史數(shù)據(jù)\中山.csv
............此處省略358個(gè)文件信息