科技改變生活 · 科技引領(lǐng)未來
科技改變生活 · 科技引領(lǐng)未來
大家好，小笨鳥今天給大家分享一篇關(guān)于國(guó)產(chǎn)香煙分析的文章，主要用python爬取“煙悅網(wǎng)”數(shù)據(jù)，并作詳細(xì)分析，帶你看看香煙的種類及價(jià)格現(xiàn)狀，放一張?jiān)~云圖：1.爬取數(shù)據(jù)1.1網(wǎng)站分析進(jìn)入主頁(yè)，煙悅網(wǎng)網(wǎng)址：https://www.yanyue.c
大家好，小笨鳥今天給大家分享一篇關(guān)于國(guó)產(chǎn)香煙分析的文章，主要用python爬取“煙悅網(wǎng)”數(shù)據(jù)，并作詳細(xì)分析，帶你看看香煙的種類及價(jià)格現(xiàn)狀，放一張?jiān)~云圖：
1.爬取數(shù)據(jù)
1.1 網(wǎng)站分析
進(jìn)入主頁(yè)，煙悅網(wǎng)網(wǎng)址：https://www.yanyue.cn/tobacco
我們可以發(fā)現(xiàn)，所有香煙品牌的名字及對(duì)應(yīng)網(wǎng)址（href）直接在首頁(yè)內(nèi)，是一個(gè)簡(jiǎn)單的靜態(tài)網(wǎng)頁(yè)。
隨機(jī)進(jìn)入某香煙品牌的主頁(yè)：
發(fā)現(xiàn)內(nèi)含該品牌下不同種類的香煙，包含名稱、類型、焦油量及價(jià)格等信息。
打開流量分析工具，分析找到該數(shù)據(jù)接口：
是1個(gè)json格式的文件，再來看看它的請(qǐng)求參數(shù)：
有兩個(gè)變量，分別是brandid=23（每個(gè)香煙品牌都有1個(gè)數(shù)字代表，在上一步網(wǎng)頁(yè)中可以找到），page=1（頁(yè)碼），這兩個(gè)變量都很好分析。
現(xiàn)在網(wǎng)站上的邏輯關(guān)系基本已經(jīng)捋順了。
1.2 爬取數(shù)據(jù)
獲取每個(gè)品牌的名字及對(duì)應(yīng)網(wǎng)址：
構(gòu)造每個(gè)品牌的主頁(yè)網(wǎng)址，計(jì)算總頁(yè)數(shù)：
根據(jù)總頁(yè)數(shù)，把該品牌所有香煙種類的數(shù)據(jù)爬下來：
將數(shù)據(jù)保存到表格中：
2.數(shù)據(jù)分析
本次數(shù)據(jù)分析主要通過pyecharts實(shí)現(xiàn)
2.1 分析香煙種類及數(shù)量
從上圖可以看出：
·香煙品牌總共有106種
·香煙種類一共有2390種
2.2 畫出香煙名字種類詞云圖
·根據(jù)詞的大小可以看出該品牌下香煙種類的數(shù)量，看來是黃鶴樓最多
2.3 畫出香煙種類數(shù)量排名前十柱狀圖
果然，種類最多的是黃鶴樓，一共有197種，感覺這幾類煙都挺常見的
2.4 畫出價(jià)格分布柱狀圖
主要根據(jù)每種價(jià)格對(duì)應(yīng)的種類數(shù)量畫圖（例如20元的香煙有161種）
這個(gè)圖看起來不那么整齊，但是仍可以獲得一些信息：
·20元的價(jià)格種類最多，總共有161種；
·最便宜的煙價(jià)格為1.5元，有6種，像北戴河(軟烤)、芙蓉(軟橙)、甲天下(軟)等，不知道能不能買到，但應(yīng)該是很多人的回憶；
·最貴的煙價(jià)格為250元，總共有2種，分別是熊貓(聽50支)、中華(聽50支)。
2.5 畫出不同價(jià)格段香煙種類的餅狀圖
首先把價(jià)格按如下方式分段：
然后統(tǒng)計(jì)數(shù)量并畫圖：
從圖可以看出，10-20元的煙種類最多，其次是0-10元和20-30元，將近一半的煙都在20元以下。
2.6 最后畫1張當(dāng)月最受歡迎的香煙top10排名圖
排名是根據(jù)網(wǎng)站上每個(gè)牌子香煙的訪問量計(jì)算來的，看來荷花非常受歡迎啊。
吸煙有害健康，希望廣大煙民程序員盡快戒煙哦！本文所有數(shù)據(jù)均來自網(wǎng)絡(luò)，僅為學(xué)習(xí)交流使用，不作為其他參考。
代碼已傳至公號(hào)【python的爬蟲與數(shù)據(jù)分析之路】，在后臺(tái)回復(fù)“香煙”獲取
精彩回顧：你是如何用python寫下第一個(gè)爬蟲的？
用python制作全國(guó)身份證號(hào)驗(yàn)證及查詢系統(tǒng)
用python對(duì)全國(guó)火車站數(shù)量進(jìn)行分析，發(fā)現(xiàn)東北三省竟然占了2成
北京的房?jī)r(jià)到底有多貴？我爬取了3萬多條數(shù)據(jù)得出分析結(jié)果
海外疫情發(fā)展態(tài)勢(shì)怎么樣？python動(dòng)態(tài)視頻20秒告訴你
基金抄底成功的概率有多大？python帶你來分析
高悅