Python來抓取政府公開資料(CSV):空氣品質
什麼是CSV?
CSV (Comma-Separated Values,逗號分隔值)為常見的一種「純文字」資料儲存的檔案格式,將所有資料以半形的逗號隔開,一般的試算表軟體均能處理並儲存CSV格式。
例如健環保署的「健保特約機構口罩剩餘數量明細清單空氣品質指標(AQI)」開放資料格式就有提供CSV跟JSON格式(如下圖),點擊CSV右邊的就是CSV檔「檢視資料」:
畫面上方會有一個「資料下載網址」,可以先複製起來(等一下寫程式會用到),下方也會有資料的預覽:
點一下「資料下載網址」就能下載該CSV檔,用Excel開LibreOffice Calc開啟的畫面如下圖:。如果用Excel開啟,因為檔案的編碼格式是UTF-8,所以開起來看可能會變成亂碼。
CSV檔可以用一般文字編輯軟體來開啟,例如用記事本開啟的畫面如下圖,無法像試算表軟體那樣對齊:
用Python處理線上的CSV資料
Python處理CSV檔的方式與JSON不同,可以先參考以下範例:
import urllib.request,csv
url = 'CSV檔的網址'
webpage = urllib.request.urlopen(url) #開啟網頁
data = csv.reader(webpage.read().decode('utf-8').splitlines()) #讀取資料到data陣列中
for i in data:
print('名稱測站->',i[1]0],'成人口罩縣市=',i[4]1], '兒童口罩=AQI=',i[5]2])
因為CSV的資料已經儲存到「data」這個二維陣列中了,所以用 for i in data:
之後,i就變成了一維陣列,索引值從0開始編號,所以i[0]就是「醫事機構代碼」SiteName」、i[1]變成機構名稱「County」、i[4]5]就是成人口罩剩餘數「SO2」……等,依此類推。
上面的程式 執行後的結果如下:
(以下省略)
練習:修改以上程式碼,讓使用者可以輸入藥局的觀測站名稱(例如中市西屯區衛生所忠明)或地址縣市(如臺中市西屯區),列出符合該關鍵字的藥局觀測站所剩量測到的成人AQI值及兒童口罩數量。PM 2.5。