亚洲国产成人精品久久_欧美日韩国产综合一区二区_亚洲精品理论电影_色综合久久中文字幕

PowerQuery抓取B站的番劇排名數據

放大字體  縮小字體 發布日期:2019-11-30  來源:來自互聯網  作者:來自互聯網  瀏覽次數:653
導讀

網絡抓取的難點應該就在這一步,因為不同的網站有不同的數據結構,所以沒有一種通用的方法,能夠適用于所有的站點,都有一站一分析。 如果我們只抓取這一頁的數據,就不用定義函數了,直接提交結果就可以了,如果我們…

B站的番劇很多人都喜歡看:

Power Query進行網絡數據抓取的4步:

  • 網站分析
  • 試抓
  • 自定義函數
  • 抓取

網絡抓取的難點應該就在這一步,因為不同的網站有不同的數據結構,所以沒有一種通用的方法,能夠適用于所有的站點,都有一站一分析。

打開谷歌瀏覽器:

初步判斷這個應該就是真是的抓取地址,對于新番排名有兩種:3日排名/周排名。

我們再來看數據預覽:

網站返回的是一份JSON格式的數據。

通過上面的分析,這個網站是GET方法的抓取,可以直接通過真實直接抓取。

試抓

建立查詢,從web,粘貼真實地址:

直接就得到這個JSON數據。

將數據逐級展開,就得到了一份表格:

試抓成功后我們就開始下一步,自定義函數。

自定義函數

如果我們只抓取這一頁的數據,就不用定義函數了,直接提交結果就可以了,如果我們要把兩種數據都抓下來,就要用一個函數來執行這個過程:

抓取

最后一步抓取,我們建一個小表就有兩個值,{3,7},通過這兩個值抓下來兩個表,合并到一起:

展開就是我們要的數據了:

這個表中的數據既包含了排名的分數,也包含了播放量、追番、彈幕數量,所以我們可以根據這幾列的數據來做自己的一個數據排列。

至此,B站新番排名的數據抓取就完成了,我么可以用Power BI Desktop中的圖片可視化對象,做一個展示:

Power BI 商店中有個Strippet Browser非常適合做圖片與文字的瀏覽:

Strippet Browser

支持的字段很多,我們就這組數據用不到那么多的字段,只填幾個主要字段就好:

第一個字段是必填的,下面標題、圖片我們填好,還有最后一行,要填排序字段:

我們是用彈幕數量來作為排序依據的。

這個視覺對象有兩種圖片排列方式,

  • 一種是縮略圖矩陣排列:選中文章時在下方顯示細節內容;
  • 一種翻書式的排列:直接在書頁中展開細節內容;

矩陣式排列:

書頁式排列:

你正在追的是哪一部呢?

 
 
免責聲明
本文為會員免費發布,僅代表發布者個人觀點,本站未對其內容進行核實,請讀者僅做參考,如若文中涉及有違公德、觸犯法律的內容,一經發現,立即刪除,作者需自行承擔相應責任。涉及到版權或其他問題,請及時聯系我們刪除處理。
 
 
主站蜘蛛池模板: 国产精品色悠悠| 国产精品一区二区三区观看| 国产mv免费观看入口亚洲| 亚洲日本一区二区三区在线不卡| 午夜精品一区二区三区av| 国产精品美女xx| 精品无码久久久久久久动漫| 日本一区二区三区视频在线观看 | 亚洲最大福利网| 国产精品美女免费| 国产精品露脸自拍| 国产精品亚洲精品| 国产区欧美区日韩区| 久久久久人妻精品一区三寸| 日韩亚洲不卡在线| 青青草精品视频在线| 日韩av综合在线观看| 日韩视频专区| 日韩中文字幕三区| 日韩免费中文专区| 日韩av不卡播放| 日本国产高清不卡| 欧美一乱一性一交一视频| 无码免费一区二区三区免费播放| 99久久伊人精品影院| 91久久久久久久一区二区| 在线播放 亚洲| 国产极品尤物在线| 国产欧洲精品视频| 国产精品一区二区你懂得| 国产美女扒开尿口久久久| 国产美女精品视频免费观看| 国产精品视频免费在线| 国产精品444| 99在线看视频| 午夜精品久久久内射近拍高清| 日韩一区二区久久久| 欧美亚洲激情在线| 久久精品亚洲国产| 国产精品流白浆视频| 亚洲一区二区三区av无码|