訂閱
糾錯
加入自媒體
當前位置： OFweek 人工智能網(wǎng)   >   其他   >  正文

如何用Python抓取上海美團火鍋的數(shù)據(jù)？

最近有個小伙伴在群里問美團數(shù)據(jù)怎么獲取，而且她只要火鍋數(shù)據(jù)，她在上海，只要求抓上海美團火鍋的數(shù)據(jù)，而且要求也不高，只要100條，想做個簡單的分析，相關(guān)的字段如下圖所示。

乍一看，這個問題還真的是蠻難的，畢竟美團也不是那么好抓，什么驗證碼，模擬登陸等一大堆拂面而來，嚇得小伙伴都倒地了。

通過F12查看，抓包，分析URL，找規(guī)律，等等操作。

不過白慌，今天小編給大家介紹一個小技巧，另辟蹊徑去搞定美團的數(shù)據(jù)，這里需要用到抓包工具Fiddler。講道理，之前我開始接觸網(wǎng)絡(luò)爬蟲的時候也沒有聽過這個東東，后來就慢慢知道了，而且它真的蠻實用的，建議大家都能學(xué)會用它。這個工具專門用于抓包，而且其安裝包也非常小，如下圖所示。

接下來，我們開始進行抓取信息。

1、在Fiddler的左側(cè)找到meituan網(wǎng)站的鏈接，如下圖所示。鏈接的左邊返回的response（響應(yīng)）的文件類型，可以看到是JSON文件，爾后雙擊這一行鏈接。

1  2  3  下一頁>  
聲明： 本文由入駐維科號的作者撰寫，觀點僅代表作者本人，不代表OFweek立場。如有侵權(quán)或其他問題，請聯(lián)系舉報。

發(fā)表評論

共0條評論，0人參與

請輸入評論內(nèi)容...

請輸入評論/評論長度6~500個字

您提交的評論過于頻繁，請輸入驗證碼繼續(xù)

暫無評論

暫無評論

    掃碼關(guān)注公眾號
    OFweek人工智能網(wǎng)
    獲取更多精彩內(nèi)容
    文章糾錯
    x
    *文字標題：
    *糾錯內(nèi)容：
    聯(lián)系郵箱：
    *驗 證 碼：

    粵公網(wǎng)安備 44030502002758號