交通領域新興技術案例集/交通開放資料
開放資料是指某些資料應該免費提供給所有人使用和重新發布,不受版權、專利或其他控制機制的限制。1開放資料的定義之一如下
- 開放資料是指任何人都可以自由使用、重用和重新分發的資料——最多僅需滿足署名和相同方式共享的要求。2
所有各方免費提供和分發的開放資料使整個資料系統能夠互操作。互操作性使政府、企業或公民都能訪問資料,並保證資訊準確且有用。開放資料允許使用者以現有來源從未想象過的方式混合資料集和資訊。
在交通領域,不僅人是可觀察的資料點,而且包括汽車、公共汽車、火車、飛機和各種公共交通工具在內的整個交通網路都在發生變化。開放資料指的是資訊——例如關於交通路線、時刻表、公路擁堵、定價等資訊——這些資訊可供免費獲取,用於分析並整合到其他應用程式中。
- 政策和規則制定者
- 各國政府制定政策以鼓勵提供和使用開放資料。他們還規範開放資料的可訪問性和分發,以保護個人資料和隱私。
- 政府制定政策以鼓勵開放資料的創新使用。
- 政府和第三方釋出開放資料的許可證。
- 資料提供者
- 政府和第三方根據許可證分發資料。
- 服務提供商
- 政府和第三方提供使用開放資料的服務。
- 使用者
- 公民/私人實體下載資料、提供價值並接收服務。
- 1942年 - 羅伯特·金·默頓闡明瞭開放科學資料的好處,這些資料可供所有人免費獲取。
- 1995年 - “開放資料”一詞首次出現在美國科學文獻中。
- 1998年 - 舊金山灣區快速交通系統以 .csv 格式釋出其時刻表資料,成為已知首次向公眾釋出交通資料。5
- 2000年5月 - GPS的選擇性可用性(SA)被關閉。
- 2007年12月 - 30名網際網路思想家和活動家舉行會議,定義了開放政府資料的八項原則。
- 2009年1月21日 - 巴拉克·奧巴馬總統的題為“透明度和開放政府”的備忘錄6
- 2009年5月20日 - Data.gov7上線。
- 2009年12月8日 - 白宮釋出開放政府指令。
- 2012年5月13日 - 巴拉克·奧巴馬總統的題為“建設21世紀數字政府”的備忘錄8
- 2013年5月9日 - 標題為“使開放和機器可讀成為政府資訊的新預設設定”的行政命令9
- 2013年5月9日 - “開放資料政策:將資訊作為資產管理”。
- 2013年5月16日 - 開放資料專案啟動。
- 2014年4月28日 - 數字問責與透明法案。
- 國家政府的入口網站
- data.gov(美國)7
- data.gov.au(澳大利亞)10
- open.canada.ca(加拿大)11
- data.gouv.fr(法國)12
- govdata.de(德國)13
- data.go.jp(日本)14
- data.go.kr(韓國)15
- data.gov.sg(新加坡)16
- data.gov.uk(英國)17
- 其他開放資料入口網站
- https://data.cityofnewyork.us/dashboard(紐約市)30
- 截至2016年4月15日,DataPortals.org(開放資料入口網站的目錄網站)已註冊了519個開放資料入口網站。18
- 增強資料可訪問性和個人資料與隱私19
- 政府如何確保公民有法律強制執行的權利來輕鬆訪問、重用和重新分發資料;以及
- 在增強資料可訪問性的環境中,是否有足夠的保障措施來保護個人資料和隱私?
- 開放資料的通用標準20
- 可以連結,以便於共享和討論;
- 以標準的結構化格式提供,以便於處理;
- 保證隨著時間的推移可用性和一致性,以便其他人可以依賴它;
- 可追溯,透過任何處理,一直追溯到資料來源,以便其他人可以弄清楚資料來源以及是否應該信任它。
- 政府在刺激開放資料使用方面的創新作用
- 根據TRB的審查確定,開放資料的可用性鼓勵了僅靠機構人員無法實現的創新。
- 刺激創新的額外好處包括:提高公眾對服務的認識,賦予客戶權力,改善公眾對政府機構的看法,以及為私營企業利用資料提供機會。21
- TRB進一步指出,在提供開放交通資料的地方,“它正在使交通作為一種運輸選擇更具競爭力,提供更好的區域服務協調,並提供更好的交通體驗。”21
- 政府機構並非以創新為導向。向公眾提供開放資料允許外部創新者找到更好的資料用途,有時是政府機構未曾打算或未曾探索的用途。21機構並不總是擁有足夠的資源來開發應用程式並在與開放市場相同的規模上進行額外的分析。
開放資料正在改變世界。開放資料可以透過提高透明度、增強公共服務和資源分配來改善政府。政府收集和控制的資料不再需要僅僅對政府有用,也需要對受資料影響的公民和企業有用。開放資料可以改善公民的溝通和資訊獲取。當雙方都瞭解可用的資料時,資料收集者和資料使用者之間的互動就會得到改善。當資料對某些方封閉時,目前會出現資訊不對稱的情況。開放資料標準可以為糾正資訊不對稱和改進資訊傳播提供途徑。開放資料可以透過促進創新為公民、政府、企業和組織提供新的機會。開放資料允許使用者有機會將來自不同位置的多個統計資料混合在一起以彙總資料。開放資料的聚合為公民和政策制定者提供了新的資訊來源,以便他們分析和確定解決問題的新途徑。
但開放資料也可能帶來負面影響。在網際網路興起之前透過的側重於透明度和問責制的立法可能缺乏足夠的隱私保護措施。正如開放資料可用於為政府和商業問題提供創新的解決方案一樣,免費公開的公共資料也掌握在可能選擇利用社會弱點的主體手中。例如,如果開放資料包含任何公民的識別資訊,然後可以與提供地圖位置的其他資料交叉引用,則隱私和安全可能會受到威脅。
- 法律開放性
- 在許多司法管轄區,資料上的智慧財產權阻止使用者在未經明確許可的情況下使用、重用和重新分發。開放許可證闡明瞭資料集的使用、重用和重新分發的開放性。開放資料提供者可以透過應用適當的許可證來設定其資料集的法律開放程度。開放資料許可證的示例列在開放定義網頁上。23 開放資料支持者的最終目標是確保儘可能多的資料在法律上對任何終端使用者免費,而無需擔心任何後果。開放資料將允許全球訪問資料,這反過來又會激發來自許多不同地點和環境的創新。政府機構收集或控制的資料將屬於此類。
- 技術開放性
- 技術上開放的資料以合理的成本提供,尤其許多資料可以從網際網路上免費下載。開放資料通常有兩種分發方式:在網站上提供資料集和透過應用程式程式設計介面 (API) 提供資料。理想情況下,提供的資料集應該是完整的,但提供者可以透過 API 分發部分資料集。技術上開放的資料具有公開定義且機器可讀的格式,這允許重用資料。機器可讀格式的示例如下:
- 地理資訊系統 (GIS)
- 可擴充套件標記語言 (XML)
- 計算機輔助設計 (CAD)
第三方(谷歌、蘋果、優步等)或根據政府來源的合同/資助收集的資料將屬於此類。受控資料對當前持有者具有價值,經濟影響將決定其可訪問性。此外,由於合同義務或不熟悉資料,政府可能無權免費分發資料,這使得第三方處於控制地位。
紐約大學魯丁交通政策與管理中心總結了所有參與者對開放交通資料的看法:“開放資料的好處包括更有效的出行(能夠隨時找到最佳路線)、對財務/行政的更深入瞭解(有助於促進改進的資金結構)以及眾包分析(有助於發現時間表改進或錯誤)。"
交通運輸中的開放資料允許政府機構從多個來源改進出行,而不是直接透過機構資源。政府的角色是以最有效和最實用的方式為公民服務。提供開放資料提供了一種新的途徑來確定對終端使用者最有效和最實用的方式。
鼓勵多式聯運完全關乎選擇——選擇駕車、騎腳踏車、乘車、打車或拼車,並用可靠的資訊支援這些選擇。因此,每個交通機構都有興趣幫助儘可能地簡化和輕鬆地進行決策,方法是使其使用者需要的資訊易於獲取且廣泛可用。開放資料完全是關於將資訊掌握在需要它的人手中,並以儘可能降低成本和最大限度地提高靈活性的方式提供資料。
公共機構承擔著許多指令,其中大部分有意或無意地收集資料,並且必須確定其資訊是否對公眾開放。這些機構收集的資料可能尚未以允許審查和準備供公眾使用的方式儲存。
交通研究委員會 (TRB) 對公共交通機構進行了調查,並確定了以下四個不向公眾提供開放資料的原因:
- 生成資料需要花費太多精力/我們沒有時間或人員;
- 清理資料需要花費太多精力;
- 我們無法控制他人如何使用資料;以及
- 我們不知道資料的準確性。
TRB 的研究表明,公共機構不確定如何有效地向公眾提供可信賴的資料,這方面存在諸多問題。資料的準確性是一個重要問題,因為公共機構的預算預測或私人創新工作都依賴於資料。當資料不可信時,公共機構和私人使用者都會受到損害。
此外,TRB 調查顯示,60% 的受訪交通機構僅根據釋出資料的難易程度來確定哪些資料公開發布給公眾。這會產生一個問題,即公共機構沒有專業知識來確定相關資料供公眾使用,也沒有人力來正確釋出資料。某些在其他開放資料中可能具有上下文意義的資料未提供給公眾,從而限制了開放資料的可能用途。如果資料僅在實體易於釋出時才釋出,則資料提供者和資料消費者之間將持續存在關於資料準確性和有用性的鬥爭。
為了向公眾提供開放資料,政府實體需要為參與制定基本規則。開放資料可能是公眾與政府實體唯一互動的方式,因此,必須有成功的專案管理選項。
- 獲得並保持管理層對該計劃的支援;
- 認識到提供和維護開放資料門戶所需的適當資源級別;
- 建立監控資料準確性、及時性、可靠性、質量、使用情況和維護的方式;
- 建立和維護許可和註冊;以及
- 與開發人員和客戶進行持續對話,實踐表明,這可以提高基於資料的價值和產品價值。
要點是需要積極管理開放資料。未得到妥善維護或未及時更新的資料對公眾或控制它的實體都沒有用處。機構需要提供充足的資源來解決這個問題。由於技術的不斷變化的需求,系統需要不斷更新,以確保能夠實現所有使用者都能使用開放資料的目標。
- 美國案例
- 俄勒岡州波特蘭的三縣都會區25
- 2005 年,三縣都會區的地理資訊系統部門允許所有交通資料免費分發給所有方,特別是 Google Transit,這是一個允許使用者在 Google 地圖中規劃交通出行路線的網站。
- 以開放格式和標準條款線上釋出資料使三縣都會區能夠在與交通相關的應用程式開發方面引發爆炸式增長。開發了 50 多個應用程式來利用新可用資料。
- 2007 年,三縣都會區將其線上系統地圖替換為開源地圖工具,而不是專有軟體。使用開放資料方法幫助波特蘭的三縣都會區提供了原始系統未考慮的其他選項。原始系統的目標是規劃僅限於交通的出行路線。透過外部影響,三縣都會區的出行計劃軟體不斷更新,以提供規劃多式聯運出行路線的能力,其中結合了交通、步行和騎腳踏車選項。該專案的開源性質允許將更多資訊聚合到一箇中心位置,併為通勤者提供做出明智的交通決策。
- 紐約市市長資料分析辦公室 (MODA)30
- MODA 由布隆伯格市長於 2013 年建立,其明確任務是收集、聚合、控制、衡量和分析紐約市的所有資料和資訊。
- 目標是從紐約市各部門和機構中消除資料控制的要求,並允許建立一個集中的資料共享和分析機構。MODA 允許紐約市“分析來自紐約市各機構和其他來源的資料,透過更具戰略意義地確定風險、更有效地提供服務以及更有效地執行法律,更有效地解決犯罪、公共安全和生活質量問題。”30
- MODA 運營紐約市開放資料門戶,允許公民訪問資訊以利用公共和私人事業的創新。
- MODA 有 5 個使用開放資料的戰略舉措
- 支援運營 - 幫助紐約市各機構更有效地提供服務,包括紐約警察局、紐約消防局、衛生局和公園/娛樂局等。
- 全市資料共享 - 提供一個數據共享平臺,用於聚合和儲存所有城市資料,包括將資料合併到地理資訊中。
- 災害應對和恢復能力 - 提供資源管理工具,以保護公民並有效規劃應急事件。
- 經濟發展 - 為市民和企業提供所需的資料分析工具,以推動創新並在紐約市促進增長。
- 開放資料 - 鼓勵紐約市所有資料免費公開提供,以便紐約市能夠從創新和機遇中受益。
- 俄勒岡州波特蘭的三縣都會區25
- 英國案例
- 2010 年,倫敦交通局 (TfL) 釋出了“倫敦交通局 2010-2013 年數字戰略”。26 在該戰略中,計劃如下:
- 釋出對倫敦交通局網站上釋出的所有關鍵交通資料的訪問許可權,以便第三方重新使用;
- 對所有資料使用通用許可流程;以及
- 與關鍵戰略合作伙伴密切合作,鼓勵使用倫敦交通局和其他機構資料的新服務。
- 它在其網站上提供了三種類型的開放資料27
- 靜態資料檔案 – 很少更改的資料檔案;
- 資料饋送 – 定期更新的資料檔案;以及
- API
- 儘可能以XML格式呈現資料。在遵守一些與保護其品牌相關的規則的前提下,允許自由使用這些資料。截至2016年4月18日,其網站上提供了約30個數據饋送和API,超過5000名開發人員已註冊使用其開放資料。一個例子是ITO World Ltd和Google將倫敦地鐵中斷的即時資訊整合到Google地圖中。28
- 除了分發資料外,英國政府還評估了對開放資料的需求。該評估由商業、創新與技能部於2013年完成。根據評估,在頁面瀏覽量和開發的應用程式數量方面,交通資料顯然是最受歡迎的。29
- 政府如何鼓勵潛在的資料提供者公開發布其資料?
- 政府如何在鼓勵開放資料使用的同時,保護個人資料和隱私?
- 政府如何確保開放資料的準確性,特別是諸如公共交通運營資訊之類的即時資料?
- 資料提供者能否滿足使用者不斷增長的需求?
- 資金最好用於提供開放資料還是提供更好的服務?
- 美國開放資料行動計劃
- TRB交通合作研究計劃綜述115 - 開放資料:公交機構面臨的挑戰和機遇
- Ben Wellington的TED演講 - 如何利用大資料找到紐約市最糟糕的停車位
- 開放資料影響 - 由紐約大學坦登工程學院維護的案例研究庫
- 公共部門資訊市場評估
1 Auer, S. R.;Bizer, C.;Kobilarov, G.;Lehmann, J.;Cyganiak, R.;Ives, Z. (2007)。“DBpedia:開放資料網路的核心”。語義Web。計算機科學講義4825。第722頁。doi:10.1007/978-3-540-76298-0_52。ISBN 978-3-540-76297-3。
2 “開放資料手冊”,訪問日期:2016年4月10日,http://opendatahandbook.org/guide/en/。
3 “開放資料簡史”,訪問日期:2016年3月24日,http://www.paristechreview.com/2013/03/29/brief-history-open-data/。
4 “開放資料簡史 - FCW”,訪問日期:2016年3月24日,https://fcw.com/articles/2014/06/09/exec-tech-brief-history-of-open-data.aspx。
5 交通合作研究計劃 (TCRP) - 綜述 115。(2015)。開放資料:公交機構面臨的挑戰和機遇。華盛頓特區:交通研究委員會 (TRB)。
6 “透明度和開放政府 | 白宮”,訪問日期:2016年3月24日,https://www.whitehouse.gov/the_press_office/TransparencyandOpenGovernment。
7 “Data.gov”,Data.gov,訪問日期:2016年4月6日,https://www.data.gov/。
8 “總統備忘錄 - 建立21世紀數字政府”,Whitehouse.gov,2012年5月23日,https://www.whitehouse.gov/the-press-office/2012/05/23/presidential-memorandum-building-21st-century-digital-government。
9 “行政命令 - 使開放和機器可讀成為政府資訊的新預設值 | Whitehouse.gov”,訪問日期:2016年3月24日,https://www.whitehouse.gov/the-press-office/2013/05/09/executive-order-making-open-and-machine-readable-new-default-government-。
10 “Data.gov.au”,訪問日期:2016年4月15日,https://www.data.gov.au/。
11 “Open.canada.ca”,訪問日期:2016年4月19日,http://open.canada.ca/en。
12 “Accueil - Data.gouv.fr”,訪問日期:2016年4月19日,https://www.data.gouv.fr/fr/。
13 “GovData | 德國資料門戶 - GovData”,訪問日期:2016年4月19日,https://www.govdata.de/。
14 “Data.go.jp”,訪問日期:2016年4月15日,http://www.data.go.jp/。
15 “Data.go.kr”,訪問日期:2016年4月19日,https://www.data.go.kr/e_main.jsp#/L21haW4=。
16 “Data.gov.sg”,Data.gov.sg,訪問日期:2016年4月15日,https://data.gov.sg/。
17 “Data.gov.uk”,訪問日期:2016年4月15日,https://data.gov.uk/。
18 “首頁 - 資料門戶”,訪問日期:2016年4月19日,http://dataportals.org/。
19 “讓開放資料成為現實:公眾諮詢”(英國政府,2011年8月),https://www.gov.uk/government/uploads/system/uploads/attachment_data/file/78884/Open-Data-Consultation.pdf。
20 美國公共交通協會 (APTA)。(2015年8月)。公共交通擁抱開放資料。政策發展與研究。
21 交通合作研究計劃 (TCRP) - 綜述 115。(2015)。開放資料:公交機構面臨的挑戰和機遇。華盛頓特區:交通研究委員會 (TRB)。
22 TransitScreen。
23 “符合的許可證 - 開放定義 - 定義開放資料、開放內容和開放知識中的開放”,訪問日期:2016年4月17日,http://opendefinition.org/licenses/。
24 Kaufman, S. M. (2012)。開放資料入門:交通機構指南。紐約市:紐約大學。
25 可持續社群研究所。“TriMet:開放資料領域的先驅”。快照:俄勒岡州波特蘭。訪問日期:http://sustainablecommunitiesleadershipacademy.org/resource_files/documents/TriMet-Portland-OR.pdf
26 “TfL數字戰略2010-2013”(倫敦交通局,2010年10月)。
27 倫敦交通局 | 每一次旅程都很重要,“開放資料使用者”,倫敦交通局,訪問日期:2016年4月19日,https://www.tfl.gov.uk/info-for/open-data-users/。
28 “開放資料白皮書:釋放潛力”(英國政府,2012年6月)。
29 “公共部門資訊市場評估”(英國政府商業、創新與技能部,2013年5月)。
30 紐約市市長資料分析辦公室 (MODA)。訪問地址:http://www1.nyc.gov/site/analytics/index.page。