資源簡(jiǎn)介
新浪微博信息豐富,適合用來做分析,用Python網(wǎng)絡(luò)爬蟲工具進(jìn)行微博信息的獲取是一種行之有效的方法,(附贈(zèng)移動(dòng)端代碼),全親自實(shí)踐,希望多多交流,共同學(xué)習(xí)
代碼片段和文件信息
#?coding=utf-8
“““??
Created?on?2016-01-09?@author:?Eastmount
功能:?爬取新浪微博用戶的信息
信息:用戶ID?用戶名?注冊(cè)時(shí)間?性別?地址(城市)?是否認(rèn)證?用戶標(biāo)簽(明星、搞笑等信息)
????個(gè)人資料完成度?粉絲數(shù)?關(guān)注數(shù)?微博數(shù)?粉絲ID列表?關(guān)注人ID列表?特別關(guān)注列表
網(wǎng)址:http://weibo.cn/?數(shù)據(jù)量更小?相對(duì)http://weibo.com/
參考:佳琪學(xué)弟和datahref博客?使用Selenium獲取登錄新浪微博的Cookie
java鏈接:http://datahref.com/book/article.php?article=webcollector_WeiboCrawler?
python:http://blog.csdn.net/warrior_zhang/article/details/50198699
“““????
import?time????????????
import?re????????????
import?os????
import?sys??
import?codecs??
import?shutil
import?urllib?
from?selenium?import?webdriver????????
from?selenium.webdriver.common.keys?import?Keys????????
import?selenium.webdriver.support.ui?as?ui????????
from?selenium.webdriver.common.action_chains?import?ActionChains
#先調(diào)用無界面瀏覽器PhantomJS或F
?屬性????????????大小?????日期????時(shí)間???名稱
-----------?---------??----------?-----??----
?????文件??????17680??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端個(gè)人信息?關(guān)注id和粉絲id?(速度慢)\SinaWeibo_Info_1.txt
?????文件?????????50??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端個(gè)人信息?關(guān)注id和粉絲id?(速度慢)\SinaWeibo_List_1.txt
?????文件??????14884??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端個(gè)人信息?關(guān)注id和粉絲id?(速度慢)\spider_selenium_sina_info_other_userid_all.py
?????文件??????13386??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)\2016-04-23\20160423_SinaWeibo_Num_Best.txt
?????文件???????1595??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)\2016-04-23\Megry_Result_Best.py
?????文件?????237289??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)\2016-04-23\SinaWeibo_Info_best_1.txt
?????文件????????189??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)\2016-04-23\SinaWeibo_List_best_1.txt
?????文件??????12115??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)\2016-04-23\spider_selenium_sina_content.py
?????文件????????840??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\運(yùn)行配置過程.txt
?????目錄??????????0??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)\2016-04-23
?????目錄??????????0??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端個(gè)人信息?關(guān)注id和粉絲id?(速度慢)
?????目錄??????????0??2018-11-13?15:54??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)\[源碼]?爬取移動(dòng)端微博信息?(強(qiáng)推)
?????目錄??????????0??2018-11-13?16:22??[源碼]?爬取移動(dòng)端微博信息(附贈(zèng)客戶端代碼)
-----------?---------??----------?-----??----
???????????????298028????????????????????13
評(píng)論
共有 條評(píng)論