正則爬取京東商品信息并打包成.exe可執(zhí)行程序
本文爬取內(nèi)容,輸入要搜索的關(guān)鍵字可自動爬取京東網(wǎng)站上相關(guān)商品的店鋪名稱,商品名稱,價格,爬取100頁(共100頁)
代碼如下;
import requests
import re
# 請求頭
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36'
}
def get_all(url,key):
for page in range(1,200,2):
params = {
'keyword':key,
'enc':'utf-8',
'page':page
}
num = int((int(page)+1)/2)
try:
response = requests.get(url=url,params=params,headers=headers)
# 轉(zhuǎn)碼
content = response.text.encode(response.encoding).decode(response.apparent_encoding)
data_all = re.findall('<div class="p-price">.*?<i>(.*?)</i>.*?<div class="p-name p-name-type-2">.*?title="(.*?)"'
'.*?<div class="p-shop".*?title="(.*?)"',content,re.S)
for i in data_all:
with open(key + '.txt', 'a+', encoding='utf-8') as f:
f.write('店鋪名稱:' + i[2]+'\n'+'商品名稱:'+i[1]+'\n'+'價格:'+i[0]+'\n\n')
print('第'+str(num)+'頁'+'數(shù)據(jù)下載中....')
except Exception as e:
print(e)
if __name__ == '__main__':
print('輸入要搜索的內(nèi)容,獲取京東商城里面的商品名稱,店鋪名稱,商品價格')
key = input('輸入搜索內(nèi)容:')
url = 'https://search.jd.com/Search?'
get_all(url,key)
打包成.exe可執(zhí)行文件。
需要用到pyinstaller包pip下載;
pip install pyinstaller
在線制作一個.ico圖標,用來當程序圖片,把圖標和程序放在同一個文件夾下,
在.py文件目錄下打開命令行窗口,執(zhí)行打包命令;
E:\練習\最后階段\0808\jd1>pyinstaller -F -i dog.ico jd.py
出現(xiàn)successfully表示打包成功;
27525 INFO: Building EXE from EXE-00.toc completed successfully.
可執(zhí)行程序在當前文件夾下的dist文件夾下;
運行效果;
可同時執(zhí)行多個程序;
輸出結(jié)果;
done。
總結(jié)
以上所述是小編給大家介紹的正則爬取京東商品信息并打包成.exe可執(zhí)行程序,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對我們網(wǎng)站的支持!
如果你覺得本文對你有幫助,歡迎轉(zhuǎn)載,煩請注明出處,謝謝!
欄 目:正則表達式
下一篇:Python正則表達式匹配數(shù)字和小數(shù)的方法
本文標題:正則爬取京東商品信息并打包成.exe可執(zhí)行程序
本文地址:http://www.jygsgssxh.com/a1/zhengzebiaodashi/11138.html
您可能感興趣的文章
- 01-11正則表達式實現(xiàn)添加、刪除、替換三種功能
- 01-11python 用正則表達式篩選文本信息的實例
- 01-11正則表達式之匹配數(shù)字范圍
- 01-11python爬蟲正則表達式之處理換行符
- 01-11正則表達式匹配路由的實現(xiàn)代碼
- 01-11正則表達式截取身份證號碼加密的方法
- 01-11js正則表達式 匹配兩個特定字符間的內(nèi)容示例
- 01-11MySQL使用正則表達式進行查詢操作經(jīng)典實例總結(jié)
- 01-11python正則表達式之對號入座篇
- 01-11詳解正則表達式實現(xiàn)二代身份證號碼驗證


閱讀排行
本欄相關(guān)
- 01-11正則表達式實現(xiàn)添加、刪除、替換三
- 01-11正則表達式之匹配數(shù)字范圍
- 01-11python 用正則表達式篩選文本信息的實
- 01-11正則表達式匹配路由的實現(xiàn)代碼
- 01-11python爬蟲正則表達式之處理換行符
- 01-11js正則表達式 匹配兩個特定字符間的
- 01-11正則表達式截取身份證號碼加密的方
- 01-11python正則表達式之對號入座篇
- 01-11MySQL使用正則表達式進行查詢操作經(jīng)典
- 01-11詳解正則表達式實現(xiàn)二代身份證號碼
隨機閱讀
- 01-11ajax實現(xiàn)頁面的局部加載
- 08-05DEDE織夢data目錄下的sessions文件夾有什
- 08-05織夢dedecms什么時候用欄目交叉功能?
- 08-05dedecms(織夢)副欄目數(shù)量限制代碼修改
- 01-10C#中split用法實例總結(jié)
- 01-10使用C語言求解撲克牌的順子及n個骰子
- 01-11Mac OSX 打開原生自帶讀寫NTFS功能(圖文
- 04-02jquery與jsp,用jquery
- 01-10delphi制作wav文件的方法
- 01-10SublimeText編譯C開發(fā)環(huán)境設(shè)置


