大數據時代統計學挑戰與機遇
時間:2022-03-23 11:34:29
導語:大數據時代統計學挑戰與機遇一文來源于網友上傳,不代表本站觀點,若需要原創文章可咨詢客服老師,歡迎參考。
摘要:文章主要討論大數據時代統計學的建設發展問題。根據大數據對統計學的影響,分析我國統計學的發展現狀,提出健全和完善統計學科的新思路,積極應對大數據時代對統計學科建設面臨的新挑戰與新機遇。
關鍵詞:大數據;統計學;學科建設
近年來大數據蘊藏的價值已經得到普遍認可[1-3],其意義在于通過數據采集、導入與預處理、統計分析、數據挖掘,發現其內在規律,創造新價值。統計學是搜集、分析及解釋大數據的方法論[5]。大數據作為統計學研究重點對象,為統計學科提供了發展平臺,促進統計理論、思想及方法不斷完善,并對數據采集、處理和分析等問題帶來了新挑戰和新機遇。
一、大數據對統計學的影響
1.處理大數據發展創新的技術手段。大數據的海量化導致數據存儲和處理分析的危機,它的多樣性使得研究的數據類型發生了改變。有些行業的數據涉及上百個參數,其復雜性不僅體現在數據樣本本身,更體現在多源異構、多實體和多空間之間的交互動態性,難以用傳統的方法描述與度量。缺乏先進的統計分析方法是從大數據中獲得最大價值的主要障礙。因此,如何發展統計理論和方法,迅速有效地處理海量數據,是解決挖掘大數據價值的關鍵技術。2.揭示大數據蘊藏價值的思想方法。迄今為止,人們對事物的研究主要依賴抽樣數據、局部數據和片面數據,產生的結果可能是片面或者膚淺的,甚至是錯誤的。文獻[1]指出了大數據時代的三個重要思維方式:①從樣本數據到全體數據;②從數據結構精確性到其混雜性;③從變量因果關系到相關關系。傳統的統計理論及方法很難用來描述巨大的全體數據、復雜的數據結構及高維變量之間的關系等,有時其計算過程及存儲量很難實現。對非結構化數據,有效的統計模型也需要新的探索和嘗試。3.運用大數據精確管理的思維習慣。大數據除了容量大以外,其整合與分析可以讓我們發現新的知識和價值。通過大數據獲得知識、商機和社會服務的能力不僅可以應用于學術研究,也可以應用于普通的機構、企業和政府部門等,使得更多人參與社會管理。目前,我們尚缺乏收集、整理、運用數據精確管理事物的意識,對“大概”“差不多”模棱兩可的思維習慣提出嚴峻挑戰[2]。大數據的影響,不僅可以改變我們對事物的思維方式,還可以增加探求知識的方式方法。在大數據時代背景下,我們可以用更寬泛的統計思維方式,分析挖掘數據中隱含的知識,揭示事物的眾多層面。
二、我國統計學發展現狀
目前,我國統計學科建設的發展與大數據時代的需要還存在許多不相適應的地方:1.統計學體系不夠完善。1992年統計學首次從經濟學中獨立成為一級學科。1998年統計學納入理學,成為與數、理、化、生、經等并列的學科類。2010年成為一級學科,授理學學位或經濟學學位[5,6]。這樣,統計學就完全從數學和經濟學中獨立出來,成了名副其實的一級學科。統計學上升為一級學科,有利于統計學科的發展,更有利于我國經濟與社會的發展。但統計一級學科確立后,大部分掛靠在高校的數學學院或經濟學院之下,作為一般學科建設發展,使得統計學發展受到一定的限制。2.學科建設滯后于時展。從我國統計學發展歷史來看,經歷了兩門統計學的特殊時期:數理統計與經濟統計。在數理統計教學中,注重理論上的學習和推導,與實際運用脫離較遠;在社會經濟統計教學中,注重實踐運用與分析,但缺乏精確推導與理論支撐,導致數理統計越來越理論化,社會統計越來越指標化。更有人主張經濟統計屬于經濟學分支,數理統計屬于數學分支,導致統計理論與應用被人為割裂開來,嚴重阻礙統計學的發展,使得我國統計學發展遠遠落后于發達國家。3.統計人才培養質量亟待提高。目前,統計人才隊伍和科研成果還較弱。尤其西部地區各高校,統計學科的師資力量和人才培養環節非常薄弱,科研成果較少,有些科研團隊的建設尚處于籌備中,導致能申請上國家自然科學基金面上項目或重點項目的教師不多。另外,有些高校只有統計學碩士點而無統計學博士點,不利于統計人才的培養。可以說,統計人才隊伍是制約和影響統計學發展的關鍵因素。
三、健全完善大數據下統計學體系的幾點思考
1.研究對象。統計學研究對象主要是數據,其來源分成兩大類:一類是物理世界,大都是實驗和傳感數據,采集和處理數據均事先設計好。另一類是與人類活動密切相關的數據如互聯網大數據,該數據大都隨機產生,具有多源異構、交互、時效、突發和噪聲等特性,并且許多數據是重復的或者沒有價值,比科學實驗數據分析更困難,這是統計研究的重難點。2.培養目標。統計學建設既需要培養理論功底扎實的統計“理論家”,又需要培養靈活運用統計的“實踐家”,推動統計學在大數據時代中的發展[7]。大數據時代下對統計人才有以下要求:(1)具有扎實的數學、經濟學以及統計學基礎;(2)具有數據采集與處理和計算機應用的基本能力;(3)具有創新、分析和解決問題的能力;(4)具有大數據智慧應用的意識和能力[8]。2019年3月28日,教育部公布了477所本科院校批準開設“數據科學與大數據技術”專業,405所高職院所設立“大數據技術與應用”專業,這意味著統計學作為支撐學科培養任務更繁重、目標對象更廣泛。3.內容體系。大數據時代統計不僅要成為一級學科,而且要有完善的學科體系。統計學科內容體系可分為理論、應用及技術工具三大部分。理論內容主要涉及各種統計方法的數學論證及推導,可以讓學生對各種統計模型和理論有較深刻的認識。統計應用實踐主要是針對不同專業的特征,旨在讓學生將統計模型運用到該研究領域[6,7]。統計分析技術工具主要包括SAS、SPSS、MINTAB、MATHCAD等高性能統計分析軟件,目的讓學生能夠進行數據處理、分析及建模,準確得出決策依據。4.評價標準。由于理論和應用統計學的研究對象不同,評價標準也應不同。統計學理論家應重點關注統計方法原理研究的深入程度。應用統計學家應考查數據抽樣方式與處理是否符合該領域的特點和規律、所選數據指標體系的合理性以及推斷方法的準確性等[8,9]。在大數據時代,統計學仍然是數據分析的靈魂[10]。統計學是數據的科學,其生命力在于政治、經濟、文化、科學等各個領域的應用。為此,各高校有責任和義務使收集、處理、運用統計知識成為學生的一種意識、一種習慣、一種文化,這是大數據時代的必然選擇。
參考文獻:
[1][美]維克托•邁爾•舍恩伯格,肯尼思•庫克耶.大數據時代:生活、工作與思維的大變革[M].盛楊燕,周濤譯.杭州:浙江人民出版社.2012.
[2]涂子沛.大數據:正在到來的數據革命[M].南寧:廣西師范大學出版社.2012.
[3]陳天鵬.數據庫營銷在零售行業的應用[D].學位論文,東南大學.2016.
[4]馮蕊.探究統計學在當代經濟管理中的影響[J].經濟研究導刊.2017.
[5]袁衛.機遇與挑戰-寫在統計學成為一級學科之際[J].統計研究.2011,28(11)::3-10.
[6]張澤厚.我國統計學科建設史上的一次重大變革[J].統計研究.2012,29(8):24-26.
[7]雷欽禮.統計學科發展:危機與突破[J].中國統計.2007,10:51-52.
[8]孫蕾.透析我國高校統計學科建設問題[J].統計研究.2004,4:36-37.
[9]薛薇.從統計應用框架探討統計學科的發展[J].統計研究.2005,8:69-71.
[10]劉軍.大數據時代,傳統統計學依然是數據分析的靈魂[D].人民日報,2015-7-20.
作者:李智明 單位:新疆大學
- 上一篇:中藥炮制技術課程建設與改革分析
- 下一篇:地方高校教學經費管理與統計思考
精品范文
10大數據學習感悟