訂閱
糾錯(cuò)
加入自媒體

如何用Python抓取上海美團(tuán)火鍋的數(shù)據(jù)?

最近有個(gè)小伙伴在群里問(wèn)美團(tuán)數(shù)據(jù)怎么獲取,而且她只要火鍋數(shù)據(jù),她在上海,只要求抓上海美團(tuán)火鍋的數(shù)據(jù),而且要求也不高,只要100條,想做個(gè)簡(jiǎn)單的分析,相關(guān)的字段如下圖所示。

乍一看,這個(gè)問(wèn)題還真的是蠻難的,畢竟美團(tuán)也不是那么好抓,什么驗(yàn)證碼,模擬登陸等一大堆拂面而來(lái),嚇得小伙伴都倒地了。

通過(guò)F12查看,抓包,分析URL,找規(guī)律,等等操作。

不過(guò)白慌,今天小編給大家介紹一個(gè)小技巧,另辟蹊徑去搞定美團(tuán)的數(shù)據(jù),這里需要用到抓包工具Fiddler。講道理,之前我開(kāi)始接觸網(wǎng)絡(luò)爬蟲(chóng)的時(shí)候也沒(méi)有聽(tīng)過(guò)這個(gè)東東,后來(lái)就慢慢知道了,而且它真的蠻實(shí)用的,建議大家都能學(xué)會(huì)用它。這個(gè)工具專(zhuān)門(mén)用于抓包,而且其安裝包也非常小,如下圖所示。

接下來(lái),我們開(kāi)始進(jìn)行抓取信息。

1、在Fiddler的左側(cè)找到meituan網(wǎng)站的鏈接,如下圖所示。鏈接的左邊返回的response(響應(yīng))的文件類(lèi)型,可以看到是JSON文件,爾后雙擊這一行鏈接。

1  2  3  下一頁(yè)>  
聲明: 本文由入駐維科號(hào)的作者撰寫(xiě),觀點(diǎn)僅代表作者本人,不代表OFweek立場(chǎng)。如有侵權(quán)或其他問(wèn)題,請(qǐng)聯(lián)系舉報(bào)。

發(fā)表評(píng)論

0條評(píng)論,0人參與

請(qǐng)輸入評(píng)論內(nèi)容...

請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字

您提交的評(píng)論過(guò)于頻繁,請(qǐng)輸入驗(yàn)證碼繼續(xù)

  • 看不清,點(diǎn)擊換一張  刷新

暫無(wú)評(píng)論

暫無(wú)評(píng)論

    掃碼關(guān)注公眾號(hào)
    OFweek人工智能網(wǎng)
    獲取更多精彩內(nèi)容
    文章糾錯(cuò)
    x
    *文字標(biāo)題:
    *糾錯(cuò)內(nèi)容:
    聯(lián)系郵箱:
    *驗(yàn) 證 碼:

    粵公網(wǎng)安備 44030502002758號(hào)