2014年3月,北京大學(xué)教授陳松蹊在霧霾彌漫的一天,產(chǎn)生分析環(huán)境數(shù)據(jù)的想法。然而當(dāng)研究工作推進(jìn)時(shí),他們向環(huán)保部門申請共享PM2.5歷史數(shù)據(jù)無果,卻拿到了美國大使館的監(jiān)測數(shù)據(jù),大喜!當(dāng)他們進(jìn)而向氣象部門申請獲得氣象數(shù)據(jù)時(shí)卻被告知需要付費(fèi)20多萬元,幾周后,他們發(fā)現(xiàn)美國氣象研究機(jī)構(gòu)的網(wǎng)站上有北京南郊觀象臺每半小時(shí)的氣象數(shù)據(jù),免費(fèi)!
課題組成員不解:“用納稅人的錢建立的公共部門,用納稅人的錢以公共服務(wù)名義購置的儀器,所收集的數(shù)據(jù),出于保密需要不公開也就罷了。現(xiàn)在居然標(biāo)價(jià)出售,而且價(jià)格不菲……”
陳松蹊那天睡不著了。他寫下了課題組的這段經(jīng)歷,呼吁共享基本的公共數(shù)據(jù),使各研究機(jī)構(gòu)、企業(yè)能及時(shí)無償獲取、分析這些數(shù)據(jù),對提高一個(gè)國家的實(shí)力至關(guān)重要。都說數(shù)據(jù)是新的“石油”,如果不能做到基本公共數(shù)據(jù)的社會共享,中國對大數(shù)據(jù)的利用恐怕在起跑線上就落后了。
三月初在一霧霾彌漫京城之日,突生一分析環(huán)境數(shù)據(jù)的想法。作為統(tǒng)計(jì)學(xué)研究者,也想為防治霧霾這一困擾國家之事做點(diǎn)貢獻(xiàn),立刻發(fā)動(dòng)中心的學(xué)生與幾個(gè)同事,開展PM2.5及相關(guān)數(shù)據(jù)的收集。首先從aqicn.org/city/Beijing/cn開始,發(fā)動(dòng)“廣大”師生每小時(shí)記錄一次。
aqicn.org/city/Beijing/cn頁面截圖aqicn.org/city/Beijing/cn頁面截圖
說起這個(gè)網(wǎng)頁,有個(gè)故事。去年秋天想請斯坦福統(tǒng)計(jì)系的美國科學(xué)院院士Rob Tibshirani教授到北大統(tǒng)計(jì)科學(xué)中心訪問、講學(xué)。Tibshirani是超高維回歸分析LASSO算法的發(fā)明者(這一算法已有幾萬個(gè)引用)。統(tǒng)計(jì)中心國際咨詢委員會主席、斯坦福大學(xué)統(tǒng)計(jì)系王永雄(也是美國科學(xué)院院士)說Tibshirani教授對中國很感興趣,建議我們邀請來中國講學(xué)。我就和清華的張學(xué)恭教授以兩校兩個(gè)中心的名義邀請。Tibshirani開始對我們的邀請很熱情,之后一個(gè)多月就沒有了回復(fù)。一再詢問,支支吾吾幾個(gè)回合后,他寄來了aqicn.org的鏈接。
Tibshirani教授也就沒有來,然而那個(gè)網(wǎng)站我每天必訪問之,以了解空氣質(zhì)量。aqicn.org是幾個(gè)工程師義務(wù)將環(huán)保部分散在各地的觀測站收集的PM2.5數(shù)據(jù),及美國駐華使館在東直門外的數(shù)據(jù)綜合整理發(fā)布的一個(gè)網(wǎng)站。它有主要污染物指標(biāo)的每小時(shí)數(shù)據(jù),但它關(guān)于氣象因素的收集不全。大家知道污染的程度受氣象條件影響很大。這使得我再次發(fā)動(dòng)同學(xué)們收集氣象臺公布的實(shí)時(shí)氣象數(shù)據(jù)(www.nmc.gov.cn)。
www.nmc.gov.cn頁面截圖www.nmc.gov.cn頁面截圖
眾所周知,想要統(tǒng)計(jì)數(shù)據(jù)告訴我們它們所隱含之規(guī)律,讓數(shù)據(jù)“說話”,必須有很多數(shù)據(jù)才行。從今年3月至今只有區(qū)區(qū)幾十天的數(shù)據(jù),太少了。遂起了獲取歷史數(shù)據(jù)之念。
在研究了幾個(gè)相關(guān)網(wǎng)頁之后,我給環(huán)保部和北京市環(huán)保局打了多個(gè)電話,沒有結(jié)果。再同美國大使館聯(lián)系,說我們想要他們收集的PM2.5歷史數(shù)據(jù),對方讓我們寫個(gè)申請。申請后幾天就收到從2008年到2014年3月底的PM2.5數(shù)據(jù)。大喜!然而只有PM2.5,沒有同時(shí)間的氣象數(shù)據(jù)也不行,大家都知道風(fēng)也是影響PM2.5的重要因素。這使我們想到了氣象局。
黃老師是去年從美國請來的年輕教授,他自告奮勇同北京氣象局聯(lián)系。幾周后他報(bào)告說氣象局可以給數(shù)據(jù),但要花錢買:2008年后的數(shù)據(jù)要20多萬元。我不信,請他再問。得到的解釋是:“每小時(shí)的數(shù)據(jù)只是幾塊錢,不貴的”。20多萬對我們做統(tǒng)計(jì)學(xué)來說是一筆大錢。為什么用納稅人資助獲得的氣象數(shù)據(jù)可以這樣賣?為什么不可以像其它國家一樣無償公開?
那天黃老師在他的微信說:“用納稅人的錢建立的公共部門,用納稅人的錢以公共服務(wù)名義購置的儀器,所收集的數(shù)據(jù),出于保密需要不公開也就罷了。現(xiàn)在居然標(biāo)價(jià)出售,而且價(jià)格不菲……”我們那天都睡得不太好。我在他的微信上回帖:“這叫錯(cuò)位,異化,愿國家進(jìn)步,有效率。”
再過幾周黃老師和張同學(xué)發(fā)現(xiàn),一美國氣象研究機(jī)構(gòu)的網(wǎng)站上有北京南郊觀象臺每半小時(shí)的氣象數(shù)據(jù),免費(fèi)!大家面面相覷,一時(shí)無語。
我后來和北大一數(shù)學(xué)院士談起此事,他說北大一同事所研究的中國地表方面的數(shù)據(jù)也是從美國得到的。看來這不是一個(gè)部門的問題。這使我想到一些研究機(jī)構(gòu)在辦公樓頂安裝儀器自己采集數(shù)據(jù)。其實(shí)這些數(shù)據(jù)環(huán)保局和氣象局都已經(jīng)有了,但由于數(shù)據(jù)不能共享,大家只能“自力更生”了。然而一臺儀器需要專人維護(hù),要經(jīng)常調(diào)試、檢測,這也是一種科研資金的浪費(fèi),這些經(jīng)費(fèi)本來可以用在更重要的研究上。
應(yīng)該說,氣象局、環(huán)保局已經(jīng)開始對氣象、環(huán)境信息通過網(wǎng)站即時(shí)發(fā)布。但對各學(xué)科的研究者來說,規(guī)范的長時(shí)間的歷史數(shù)據(jù)更有科學(xué)價(jià)值。然而獲取規(guī)范的長時(shí)間的歷史數(shù)據(jù)仍是無路可循。往往要通過關(guān)系,甚至高價(jià)購買。
共享基本的公共數(shù)據(jù),使各研究機(jī)構(gòu)、企業(yè)能及時(shí)無償獲取、分析這些數(shù)據(jù),對提高一個(gè)國家的實(shí)力至關(guān)重要。都說數(shù)據(jù)是新的“石油”,如果我們不能做到基本公共數(shù)據(jù)的社會共享,中國對大數(shù)據(jù)的利用恐怕在起跑線上就落后了。
我建議,氣象、環(huán)保等不涉及國家安全的公共數(shù)據(jù)應(yīng)該公開。可以簽署協(xié)議對數(shù)據(jù)的使用進(jìn)行規(guī)范,此外對研究團(tuán)隊(duì)的資質(zhì)以及一些敏感的數(shù)據(jù)也可以審慎評估。
希望在這件事上政府先帶個(gè)頭,為非公共機(jī)構(gòu)也公開他們的數(shù)據(jù)做個(gè)榜樣,為中國在大數(shù)據(jù)的利用上建立一個(gè)有效率的環(huán)境。
(作者為北京大學(xué)光華管理學(xué)院商務(wù)統(tǒng)計(jì)與經(jīng)濟(jì)計(jì)量系聯(lián)合系主任、講席教授、北京大學(xué)統(tǒng)計(jì)科學(xué)中心聯(lián)席主任)
(聲明:本文僅代表作者觀點(diǎn),不代表本網(wǎng)立場。)