成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

爬取點評成都數據,只為告訴你哪家火鍋好吃

大數據 數據分析
冬天到了,天氣越來越冷,小編起床越來越困難了,每一天都想吃辣辣的火鍋。那么如何選擇火鍋店呢?最簡單的肯定是在美團、大眾點評上找一找啊。所以,本文就從大眾點評上爬取了成都的火鍋數據,來進行了分析。

冬天到了,天氣越來越冷,小編起床越來越困難了,每一天都想吃辣辣的火鍋。成都到處都是火鍋店,有名的店,稍微去晚一點,排隊都要排好久,沒聽說的店,又怕味道不好。那么如何選擇火鍋店呢?最簡單的肯定是在美團、大眾點評上找一找啊。所以,本文就從大眾點評上爬取了成都的火鍋數據,來進行了分析。

1、爬蟲

首先小編定位為成都,美食類型選的“火鍋”,火鍋具體類型選的不限,區域選的不限,排序選的智能,如圖:

爬取點評成都數據,只為告訴你哪家火鍋最好吃

你也可以選擇別的選項,只是注意URL的變化。本文都是按照上述選項爬取的數據。接下來翻頁觀察一下URL的變化:

第二頁:

爬取點評成都數據,只為告訴你哪家火鍋最好吃

第三頁:

爬取點評成都數據,只為告訴你哪家火鍋最好吃

很容易觀察出翻頁變化的知識p后面的數字,倒推回***頁,發現一樣的顯示內容,因此,寫一個循環,便可以爬取全部頁面。但是大眾點評只提供了前50頁的數據,所以,我們也只能爬取前50頁。

這一次,小編用的pyquery來分析網頁的,所以我們需要定位到我們所爬取的數據的位置,如圖:

爬取點評成都數據,只為告訴你哪家火鍋最好吃

在具體分析的網頁的時候,我震驚了,大眾點評的反爬做的太過分了,它的數字,一些文字居然都不是明文顯示,而是代碼,你還不知道怎么分析它。如圖:

爬取點評成都數據,只為告訴你哪家火鍋最好吃

很煩的,一些文字又可以顯示,一些又用代碼表示。一些數字也是,不過好一點的是數字只有9個,只要稍微觀察一下,就能發現數字的代碼是什么了。這里小編列出來了。 {'hs-OEEp': 0, 'hs-4Enz': 2, 'hs-GOYR': 3, 'hs-61V1': 4, 'hs-SzzZ': 5, 'hs-VYVW': 6, 'hs-tQlR': 7, 'hs-LNui': 8, 'hs-42CK': 9}。值得注意的是,數字1,是用明文表示的。

那么,如何用pyquery來定位呢,很簡單,你找到你要獲取的數據,然后右鍵→copy→cut selector,你復制到代碼里面就OK了。pyquery的具體用法百度既有。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

***,我們獲取了火鍋50個頁面的數據,每頁15個數據,一共750家餐廳的數據。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

2、分析

大眾點評已經給出了***評價,可以看看大致趨勢。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

準五星商戶最多,可能因為大部分食客都習慣給好評,只有實在不滿時才會打出低評有關,造成了評級一般不低,但近滿分還是蠻少的。

在本文,我們假設評論數目為飯店的熱度,也就是它越火,評論數目越多。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

評論數目大多在1000以內,但是高于2000,甚至高于4000也還存在一些,這些飯店應該是一些網紅店。以5000為約束,篩選出飯店均為小龍坎、蜀大俠都非常知名的火鍋店。那么評論數量和***有關系嗎?看下圖:

 

爬取點評成都數據,只為告訴你哪家火鍋最好吃

這里取其評論數平均值,發現對于四星以上商戶來說,評論數和***并不關系,但均比低于四星的飯店銷量更好。這說明在四星以上之后,人們選擇差別不大,但一般不愿意接受評論太差的飯店。

對于小編這樣的學生黨來說,影響較大還有人均消費情況。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

成都的火鍋店人均消費大部分都在50-100的區間內,高于150的也有一些。對于小編來講,吃一頓火鍋,人均在50-100是可以接受的,高于100,小編就要低頭看看錢包了。那擴展看,人均消費和***、評論數量有關系嗎?

爬取點評成都數據,只為告訴你哪家火鍋最好吃

上圖是人均消費和***的關系,看起來并無任何關系,那說明一些口碑好的火鍋店,其實人均也不貴。下面看看人均和評論數目的關系吧。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

通過比較,發現評論數目低于500,人均在50-100區間是最多的。當然這肯定和評論數量、人均消費本身集中于這一階段有關。

吃火鍋,一家店的生意好壞,肯定還和它的特色菜有關,小編通過jieba分詞,將爬取到的推薦菜做了一個詞云圖,如下。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

小編***的牛肉是特色菜之最啊,尤其是麻辣牛肉,只要去吃火鍋,都要來上一份,其次是毛肚、蝦滑、鵝腸等等。

接下來是大家都關心的,口味、環境和服務的情況。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

三者得分大多都是集中在8.0-9.2這一階段,小編認為,低于7.5分的飯店還是不要去嘗試了。同時,***評價應該也是由這三者得分產生的。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

爬取點評成都數據,只為告訴你哪家火鍋最好吃

爬取點評成都數據,只為告訴你哪家火鍋最好吃

果然如預想的一向,***評價越好,它在口味、環境和服務的得分越高。那么口味,環境,服務得分與評論數量,平均價格有關系嗎?

爬取點評成都數據,只為告訴你哪家火鍋最好吃

如圖所看,并無什么直接關系,但是我們發現口味、環境和服務三者之間存在著非常好的線性關系,于是單獨拿出來畫了一個較大的圖。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

我們并且擬合了線性關系,由于三星商戶只有一家,它的情況較為特殊之外,其他***在口味、環境和服務的關系擬合中保持的相當一致,這也證明我們的猜想,這些變量之間存在線性關系。鑒于小編本文***的目的是做推薦,于是,我們進行了K-means聚類,這里小編取K為3,并且把***轉換為數字,五星對應5分,準五星對應4.5分,以此類推。最終得到了三類,通過作圖,看看聚類情況如何吧。

爬取點評成都數據,只為告訴你哪家火鍋最好吃

爬取點評成都數據,只為告訴你哪家火鍋最好吃

爬取點評成都數據,只為告訴你哪家火鍋最好吃

爬取點評成都數據,只為告訴你哪家火鍋最好吃

和我們想要的結果一致,在口味、環境、服務和***上得分越高,我們就越推薦。然而推薦的店鋪還是好多,能不能在集中一些呢?于是小編通過限制評論數量、人均消費和特色菜來進行推薦。由于小編喜歡人少,便宜還有牛肉的店鋪,這里得到了如下的結果:

爬取點評成都數據,只為告訴你哪家火鍋最好吃

小編接下來要做的就是,吃遍它們,哈哈哈哈,想想都開心。

就醬~~~

代碼在:https://github.com/summerheday/dazhongdianping-chengdu-hotpot

責任編輯:未麗燕 來源: 經管人學數據分析
相關推薦

2018-12-20 11:50:46

Python房租分析

2016-11-07 14:39:23

2015-11-18 11:34:39

吃貨餐館起名

2018-03-17 16:56:27

運營商投訴中國移動

2018-05-23 12:34:39

Python網絡爬蟲豆瓣電影

2018-07-25 13:47:51

彭于晏邪不壓正Python

2021-04-15 09:37:05

大數據Maven

2015-10-28 15:04:51

大數據教育

2016-12-08 16:47:06

2018-09-19 14:03:00

Python房價cookie

2021-08-02 14:27:18

大數據殺熟人工智能網絡投訴

2019-01-02 12:23:30

Python金融數據爬取

2023-12-08 07:38:13

GptsOpenAIChatGPT

2020-10-26 15:09:35

Python爬蟲網頁數據

2013-08-22 10:56:34

大數據

2021-01-27 14:10:08

大數據年貨網購

2012-10-17 10:09:14

大數據大數據管理數據挖掘

2021-07-26 11:02:29

鄭州暴雨河南

2012-07-03 16:56:12

Hadoop

2010-09-15 14:02:07

關鍵數據備份
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产91中文 | 二区三区视频 | 欧美色综合天天久久综合精品 | 亚洲精品国产成人 | 亚洲免费一区 | 国产成人短视频在线观看 | 国产乱码久久久 | 黑人性hd | 中文字幕在线视频网站 | 国内精品99 | 一区二区在线 | 欧美日韩一区二区三区四区 | 少妇一级淫片免费放播放 | 噜啊噜在线 | 最新中文字幕 | 日日摸天天添天天添破 | 91精品国产91久久久久游泳池 | 毛片a级毛片免费播放100 | 欧美久久久久久久久 | 国产精品久久久久久久久图文区 | www.中文字幕av | 亚州激情| 亚洲深夜福利 | 国产高清精品一区二区三区 | 成人福利视频网站 | 日本a视频| 久久久国产一区二区三区 | 欧美最猛黑人 | 免费一级片 | 久久精品99国产精品 | 色欧美片视频在线观看 | 国产色视频网站 | 久久精品屋 | 国产午夜精品一区二区三区嫩草 | 精品视频在线播放 | 日韩欧美三区 | 国产欧美日韩综合精品一区二区 | 欧美精品一区二区三区在线播放 | 男女网站免费观看 | aaaaaaa片毛片免费观看 | 久久精品二区亚洲w码 |