跳至主要內容

About Open Data Census Taiwan(初期心得)

在填寫各地方政府資料開放評比時,其實很多資料是找不全的只能勉強用中央資料代替。

各地方政府有預決算資料、補捐助資料,但看不出資金流出動向。

工商名錄這種東西是掌握在商會手裡,只能找商會,而商會是私人的要錢的。勉強找商業司的資料,每月更新一次,都是PDF。到目前為止,只有新竹縣是有縣政府提供工商名錄的查找,卻依然跛腳 (所以有 pixnet hackathon,鼓勵民間提供資料) 。

台南市政府甚實很棒,沒有和人家一窩蜂的搞 OpenData 網站,而是運用http://data.gov.tw/,資料好找很多但內容不能算好,不過沒有多花錢去生一個網站,就不會多花時間去維護另一個網站,相對來說,另外四都除了中央的開放資料平台要維護外,還要保持自家平臺資料的同步。最有趣的是,相同資料在不同網站還有不同的授權條款。但老實說,那些95%以上是 #PublicData 沒有所謂的授權,且那是很早之前就要做的東西,拿出來說是開放資料,其實很好笑,更不用說網頁下方的 All Rights Reserved 和令人倒地的PDF檔。各平臺只有比誰比較不讓我昏倒在電腦前,沒有比好的,更別說農委會的開放資料平台了。農委會沒有正式公告把使用規範從CC改成那奇怪的使用規範不說,還搞了個惱人的javascript跳出訊息。宜蘭在開放資料的內容提供算是做得不錯,雖然資料不多,所以超越台南市。

各地方政府的許多資料都零散在各部門網站裡,很難找,有的估計是有資料卻不想多花時間人力提供,有的認為中央有資料就好。例如有些地方政府的採購契約有集中在公開資料頁面(宜蘭縣、台南市),有的就連結到採購網叫你自己找。就像金管會的人員認為『自己有上繳給主計處、維護自己的網站功能就好,為何要提供資料出來?』

我只針對我評比的城市來做以上的心得描述。

這個評比會讓人更熟悉政府網站,日後查找資訊會更容易。

我一定會有盲點,也有找不到、誤會、不熟悉的地方,所以需要多一點人去評比,這樣才會客觀。請參考 T.h. Schee 的連結,加入資料評比的一員,或是擔任 reviewer,幫你服務的單位平反,也能幫大家找出正確的資訊位置。

  1. 如何加入Open Data Census Taiwan:https://c4t.hackpad.com/Open-Data-Census--3ecZuigyexM
  2. Open Data Census Taiwan:http://tw-city.census.okfn.org
等評鑑完再寫一篇文章,晚安。

留言

  1. 台南市政府...咦,之前不是有發開放資料平台的標案嗎?還沒完工?

    回覆刪除
  2. 台南市教育局有一個開放資料平台。
    如果確定有一個台南市的開放資料平台,那也很令人期待。
    沒完工時先用這樣的方案也不錯啦!反應還蠻快的。

    回覆刪除

發佈留言

請勿匿名留言,待審核後才會出現。

此網誌的熱門文章

台灣女性在 ICT 相關產業的情況(更新至 2018 的資料)

Image by StockSnap from Pixabay 去年五月時寫了一篇「 願天下的女性都能享受自己選擇的人生 」,事隔一年,主計總處、內政部的詳細報表資料已經找不到了,只找到粗略的分級,所以今年也不打算更新太多項目,只大概更新一下資料。關於資料這件事,如果政府繼續排斥將這些資料完整的公開,我覺得整個開放資料或政府公開資訊都只是做做樣子,有交差就算了。 在我開始更新資料前,先讓大家看一下這是讓我今年在主計總處統計專區裡所下載回來的資料,表頭是「臺灣地區15至64歲已婚女性曾因結婚、生育而變更職務之情形」,但只有依學歷來區分,無法看到以年齡來分組的統計資料,但這份資料的主題不就是以年齡來分組嗎? 臺灣地區15至64歲已婚女性曾因結婚、生育而變更職務之情形 後來我找到 2016年的「 婦女婚育與就業調查報告 」,其實就是去年使用的資料,所以只好再去找尋其他的資料。

為什麼我支持《數位中介服務法》草案

在經歷許多次反抗台灣政府所立的網路相關法案後,我其實沒想過除了《數位通傳法》草案外,我還會再支持另一部法律草案,雖然 《數位通傳法》草案還壓在某處,但如果有人讀過《數位通傳法》的草案,再讀這部《數位中介服務法》草案,就會知道這部草案的重要性,而且也可以顯示台灣網路使用者的成熟度,更重要的,這是我第一次看到引入國際網路治理多方利害關係人機制的法律草案,而且是用在正確的地方。 有興趣想知道我在讀法條時的筆記和當下的感想,可以看我這則  Tweet 。這篇不使用逐條讀法條的方式來寫,因為那會讓人昏昏欲睡,我也不去比對歐盟《數位服務法》,因為我在讀《數位服務法》草案時,該草案特別強調是加強歐盟 E-Commerce Directive  ,而不是取代它,而且更多著重在預防盜版、仿冒,保護消費者的法案。所以當有輿論提到參考自《數位服務法》的《數位中介服務法》草案限縮言論自由時,我其實是一頭問號的,但一直到今天我才有時間讀《數位中介服務法》草案,這篇文章出自於我的個人經驗和閱讀法案的心得,與擔任的職務無關。 如果最近注意一下網路的資訊,有幾件事該注意一下: 有許多人在社群平台,如Facebook或是其他網路看到一些廣告,而這些廣告可能是要你支持台灣農產品、台灣製的產品,結果你收到時,上面還寫著簡體字,通常這是所謂的一頁式廣告詐騙,而行政院的消費者保護會在 2019 年時就有新聞稿在警告「 一頁式廣告詐騙多 小心查證保障多 」,之後像公視或是其他單位都有相關的活動在提醒大家小心這類廣告。但目前這些廣告其實多數不易處理,因為不容易取證、保留證據,等到追查到時已經找不到對方了。 有不少親密照片與影片在情侶分手後,被報復性的上傳到情色網站或透過即時通訊傳到親友的帳號裡,或是被洩露個資,遭到公開的霸凌。 之前有一個專題:「 青春煉獄:網路獵騙性私密影像事件簿 」,光是讀完這個專題報導我就覺得受傷。 有人使用 Deep Fake 把台灣名人的臉部照片合成至色情影片再上傳至色情影片平台,今年 7 月才被判刑。 還有許多創作者藉由網路分享作品時,被人盜用,甚至有國外的使用者修改台灣人的作品去參與比賽還獲獎。 有一次打電話問某個部會,如果消費者在國外電子商務平台買東西,但資料被外洩怎麼辦?雖然政府願意協助,但衡量至國外打官司的時間和成本,就會讓人卻步。 有些行為在現實世界裡有法...

食品溯源與營養成分分析程式的困難

我之前寫過自己在做一個 分析營養成分的Bot ,用最簡單的方式追蹤每日、每週、每月的營養攝取狀況。做著做著,我發現一個問題:如果這個 Bot 要進一步給予建議,會踩到 誰該給建議的界線 。剛好最近食安新聞不斷,我想起自己多年前放棄的食品溯源專案,於是把原本分析營養成分的 Bot,延伸成一個自己動手做的食品溯源程式。這篇文章想分享的是這個延伸過程裡遇到的三個矛盾:營養分析的黑盒子問題、自己做溯源程式時撞到的資料難題,以及消費者實際採購行為與溯源理想之間的落差。 營養分析的黑盒子 目前市面上以AI分析營養成分的應用,有一塊我一直覺得模糊的區域:使用者無從得知分析依據為何。另外還有一個更根本的問題,使用者吃東西為什麼要先拍照才能吃?拍照分析一餐,本身就是打斷用餐過程,也不符合大部分人吃飯的日常邏輯。唯一真正說得通的應用場景,是把這個功能放進眼鏡裡,讓使用者所見即可分析,不需要額外動作。 即使先不談拍照這件事,營養分析Bot本身也有精準度的問題。脂肪與鈉含量是最難估算的兩項,AI會給出數字,但使用者不知道這個數字的計算依據,實際使用中也會遇到辨識失敗的案例,還需要「教會 AI 學習與記憶」歷次辨識的結果。 動手做自己的食品溯源程式 做到現在,大概能理解當初這類食品溯源計畫為什麼沒有做出大家都想用的成品。核心困難是各方資料庫格式不一致,在沒有 AI 協助的年代,清洗資料、做正規化本身就是一個工程量很大的任務。現在有AI協助,清洗與統一格式的速度快很多,但還是存有資料流失的風險。 台灣食藥署有提供開放資料下載,實際使用後我發現幾個資料本身的漏洞,而這些漏洞不是食藥署一個單位能單獨解決的: 進口商紀錄無延續管制:曾有食安風險新聞的進口商,依然可以繼續進口食品; 廠商自主登錄無強制力:部分食品不會主動登錄食藥署平台,登錄與否全靠廠商自願,沒有強制規範; 品牌名稱相近造成混淆:統一生機、統一生醫、義美生醫、義美生技等大廠的名稱相近,AI在判斷資料時,很難判斷該合併還是分開處理,還需要去工商登記查詢。 相對地,國內較大品牌像聯華、光泉、義美,通常會自建食品溯源網站,並在自家包裝上印刷條碼,消費者掃描條碼就能連結到來源與檢驗結果。這類大品牌的資料完整度高,我做溯源程式時,對於大品牌並建有溯源平台的資料則以品牌自建平台的資料為主,不會再抓下來。 使用行為的矛盾 整個使用流程是拍照或掃描、上...