前言:中文期刊網精心挑選了大數據時代的概念與特征范文供你參考和學習,希望我們的參考范文能激發你的文章創作靈感,歡迎閱讀。
大數據時代的概念與特征范文1
【關鍵詞】物聯網 大數據 智慧城鎮 智能化
伴隨著物聯網應用的不斷興起,來自傳感器和設備的數據正以指數級增長。比如對城市基礎設施的監測,環境感知,城市交通,以及眾多設備上的應用。物聯網讓各式各樣的數據匯入到信息網絡,加深了信息系統與物理世界的聯系。然而物聯網下大數據和一般數據有較大的不同,它是異構性的、多樣性的、還良性的,并以這些特征沖擊著社會的各個領域,為智慧城鎮提供基礎保障。
自1983年,IBM最新關系數據庫管理系統DB2,結構化查詢語言成了為政府部門的主流產品; 1991年萬維網(world wide web)利用超文本傳輸協議(HTTP)和超文本標記語言(HTML)逐漸成為信息共享的公共服務。2003年,電腦和其它數據系統一年中所產生的信息量超過了2003年之前歷史上全人類所產生的信息總量。直到2005年Apache Hadoop項目的誕生,成為了處理大數據的基礎。物聯網時代的大數據以及建立在這些大數據基礎之上的數據挖掘已成為了一種戰略資源,更為建設智慧城鎮鋪墊了道路。為了使物聯網下的大數據成為城鎮走向“智慧化”的強大引擎,還需要進一步把握物聯網下大數據的發展趨勢,從而實現以物聯網帶動大數據的發展,繼而實現智慧城鎮建設目標。
(一)大數據的基本概念:
由于大數據本身較為抽象,目前還沒有一個公認的定義, 2009年流行于互聯網直到2013年,一場大數據變革悄然來襲,影響了眾多領域,因此2013年被稱為大數據元年。早年,著名的Apache的開源項目Hadoop成為處理大數據的基礎。后來Gartner研究機構將其定義為一種巨大規模、多樣性和高增長特性的信息產業,它和普通的數據庫處理系統互不兼容,需要從新的 并行數據處理平臺或技術從大數據中提取有效的決策并優化信息。正如IBM首席執行官羅睿蘭所說,大數據將是下一個自然資源。而大數據的處理周期與傳統數據相比也從原來的月、周、天變為時、分、秒。而隨著物聯網時代下的大數據發展,城鎮以及人們的衣食住行、娛樂、安全等,也變得越來越智能化。
(二)大數據的特征:
大數據具有典型的4V特征:Volume(大量性)、Variety(多樣性)、Velocity(高速性)、典型的Value(價值性)。這四個典型特征保證了大數據比傳統數據更大、更快、更好。
1.大量性:著名未來科學家阿爾文托夫勒曾預言“大數據”是三次浪潮的華彩樂章,30多年后隨著信息化的發展和爆發式的增長,大數據時代如期而至,僅百度公司數據總量已接近1000PB,存儲網頁的數量接近1萬億,每天響應請求幾十億次,淘寶的4億會員每天產生商品交易數據多達20TB,一分鐘內“臉譜”的瀏覽量超過600萬,而這些迅速增長的數據把人類帶入了一個以PB為單位的大數據時代。
2.多樣性:大數據的形式大體可以分為三類:一是結構化數據,二是非結構化數據,三是半結構化數據,由數據來源決定大數據的多樣性。
3.高速性:大數據的規模大并且對響應速度有嚴格的要求,在分析數據輸入等處理上幾乎不延遲。
4.價值性:物聯網時代下的大數據蘊藏的價值是巨大的,隨著信息化高度發展時代,人們生活領域以及衣食住行、娛樂,都會變得越來越智能化,大數據在不久的將來遍布城市各個角落,成為“城鎮”走向“智慧城鎮”的強大引擎。
二、物聯網下大數據發展趨勢和智慧城鎮建設
(一)物聯網下大數據發展趨勢
物聯網企業的發展像互聯網一樣,使用物聯網的用戶數量要看用戶貢獻或使用了多少數據,因此數據是物聯網企業是否成功的核心。正是因為這些聯系把物聯網與大數據連接在了一起。物聯網產生的大數據之間也是有區別的,最基本的是結構化數據也是最容易被處理的,其次是可處理非結構化數據,如新聞等,還有就是不能被處理的非結構化數據。在物聯網的運營模式里,它有著數據產生、數據收集、數據處理,決策和應用的過程。數據處理是最重要的環節也是其價值所在。
(二)推動智慧城鎮建設
隨著物聯網,大數據等信息技術的進步,我們居住的城鎮以及交通、家居、物流環保的智能化,成為了經濟新的增長點。物聯網把實物通過傳感器與互聯網進行連接,達到智能識別與管理。其結構分為四層,即感知層、網絡層、應用層和實體層,每一層都與數據產生和處理有關。在感知層上,包括了三維碼標簽,RFID標簽,GPS,傳感器等,識別物體,提取信息,網絡層將感知層獲得的信息進行傳遞和簡單處理,應用層是物聯網與數據的深度處理融合,借助數據采集、傳輸實現物聯網與各類實體相互應用,實體層則把物聯網結構形成了環狀封閉結構,從物聯網到互聯網,從互聯網到實體,數據的產生范圍成倍增長。智慧農業即屬于物聯網應用層也是智慧城鎮建設的重要組成部分,與之相關的種子,土壤,化肥,溫度,光照,各種養分等進行監測,這一過程中產生的相關數據,有利于輔助農業生產,提升價值。通過物聯網的四層結構,提高農業生產水平的預期得以實現。智能交通是另一個代表。大數據下的智能交通通過感知層、傳感器、監控、GPS等產生的海量數據與天氣狀況等數據相結合,監控到每條路、每輛車,將信息處理后傳遞給人們,為人們提供最好的體驗,提升通行效率,降低事故率。
綜上所述,物聯網下的大數據應用是主體,技術是手段,智慧城鎮的發展時期推廣的重要手段,而推廣進程中也對物聯網結構,、大數據處理提出了更現實生動的要求。物聯網下大數據的發展將為城鎮帶來智慧的變革,實現建設智慧城鎮的目標。
參考文獻:
[1]孟小峰,慈祥,大數據管理:概念、技術與挑戰【J】計算機研究與發展,2013(1)
[2]任玉梅,智慧城市的生活圖景【J】大眾科學,2014(4)
大數據時代的概念與特征范文2
[關鍵詞] 大數據;審計工作;挑戰與對策
[中圖分類號] F230 [文獻標識碼] B
一、大數據的有關概念與特征
1.“大數據時代”下CPA審計的概念
大數據作為一項新的技術革命,它給人們帶來了大量的數據,科學技術的創新,是信息產業的新現象。大數據具有大容量、多樣性、速度性和價值性。大容量指的是數據的數量級的功能,是一個收集的大數據,數據的來源是廣泛和大量的。多樣性是指大數據的數據類型呈現多樣化的特點,多樣化指的是數據的產生和傳播,因此可以說,在大數據時代,信息的生產者和傳播者是每一個人的日常。速度特征是指相對于傳統的數據時效性和數據的分析,大數據時代,信息通信速度,數據“保存期更短”。價值特點和前三個特點不盡相同,它表明了時代的大數據信息和數據除了量的優勢,而且是一個質的保證,這里指數據的價值性和準確性?!按髷祿备拍钕聰祿强梢酝卣沟?、可估值的、開放性的,這些特性區分了大數據和傳統數據。目前我國互聯網經濟的快速發展,大數據時代已涉及到審計工作的各個方面。
2.CPA審計在“大數據時代”下的特征
由于社會各屆的積極參與,“大數據”才可能成為一個時代。大數據時代的到來也將代表信息社會的到來,因此,審計學科也要積極參與這一新時代,以品味時代的甜蜜,行業的積極調整。大數據時代下的注冊會計師審計主要靠云計算信息技術審核,也被稱為云審計。文峰(2011)指出,當越來越多的企業提供云服務,越來越多的企業采用云服務。秦榮盛(2014)指出,“云計算”或審計會對審計產生深遠影響的大數據,將逐步改變審計技術和方法。因此,作為注冊會計師審計和認證服務的事務,也應該使用云計算的概念,以提高審計技術和方法。
二、大數據時代CPA審計工作面臨的挑戰
1.大數據環境下審計工作的有效性和完整性受到挑戰
大數據技術在審計中逐步應用,審計成果不僅有審計報告,還有大量有價值的信息和數據,這些都可以提供給被審計單位完善管理和內部控制審計,從而更廣泛的應用審計成果應用。審計工作中獲取的大量數據和有關資料進行總結,可以有效地獲取企業財務、經營管理和制度設計等方面的內在規律和發展方向。通過大數據技術,我們可以分析被審計單位與審計問題、注冊會計師與審計成果,進一步采用信息技術數據化處理,形成審計應用數據庫,在下一次審計活動中,注冊會計師就可以根據審計計劃,通過紀錄信息有針對性地按照審計目標進行審計。
2.大數據環境給審計思維模式帶來挑戰
一些傳統的審計方法,在大數據環境下不再合適,例如傳統的抽樣審計。因此審計抽樣方法應該向總體審計方法轉變。之前沒有對所有數據進行訪問、處理和分析,審計方式的思維方式是以小樣本性質和隨機抽樣分析的方式來進行,根據樣本分析結果來推斷審計對象的總體情況,審核過程更依賴審計抽樣方法。但在大數據環境下,它可以收集和分析整個領域的數據,是一種組織和分析所有數據的通用審計方法。因此在大數據環境下,注冊會計師審計單位要檢查所有相關數據,將審計工作與云審計有效整合,逐步形成審計模式的整體思路。這種基于整體審計模式的思維方式,將為會計師事務所的審計工作帶來巨大的挑戰。
3.傳統的審計技術和審計方法面臨挑戰
經過多年的逐步的創新和多元化發展,傳統的審計工作積累了很多有效的審計手段和審計技術。例如,控制測試常用的觀察,訪談,業務流程描述,而且通過測試,實質性測試,檢查,庫存,確認等。但是,在大數據環境下,許多傳統的方法都面臨著巨大挑戰,審計技術和方法必須在技術創新和變革的不斷進步中進行。大數據環境下,數據采集、數據存儲、數據處理和分析技術將不斷涌現,如果繼續使用傳統的審計手段和審計技術,就會降低工作效率,如果要有效利用分布式結構、云數據庫、聯網審計等多種技術手段,就需要不斷提高審計能力。
4.大數據時代基于相關分析的審計證據收集面臨挑戰
在審計證據收集中,通過因果關系分析收集到的審計證據,傳統的思維方式是建立在因果關系的基礎上,對大數據的分析更會利用相關分析發現和收集審計證據。大數據技術從審計技術角度看,提供了一個從未有過的跨域,可用于量化的相關審計信息的維度,可以記錄大量的分析。大數據分析也還是沒有改變審計事項之間的關系,然而大數據分析技術的關系開發與利用,使得數據分析的因果關系減少了,而是更多的傾向于應用程序的基礎上的相關的數據分析。大數據分析的重要特征是基于相關性分析的證明。這對注冊會計師來說,因為長期依賴因果關系進行審計證據的收集和發現,著實面臨重大的挑戰。
三、大數據時代下CPA審計工作的應對策略
1.加快大數據審計技術應用的法規建設
大數據技術應用要成為會計師事務所依法審計的依據,必須有一個符合其發展規律的法規支撐。云審計數據采集與存儲系統的標準化和審計數據分析結果及相關電子證據的法律地位,是大數據技術在注冊會計師審計中必須解決的問題。這是大數據技術充分發揮其在注冊會計師審計中的重要作用的前提。目前,云計算技術還缺乏相關的法律法規,大數據計算技術的合法化是大數據面臨的一個重要而緊迫的問題,尤其是數據的安全性和保密性。因此,利用大數據進行注冊會計師審計必須建立一個新的審計制度或準則,而且應該特別強調大數據審計中的審計師的責任。
2.建立行業層面大數據審計分析平臺
如果要在審計中實現大數據的應用,需要建立大數據分析平臺。大數據審計分析平臺建設有兩條路徑選擇:一是中國注冊會計師協會審計數據資源的集合,可以滿足注冊會計師的審計服務需求,云存儲架構和云計算技術作為基礎,直接構建注冊會計師行業級數據審計分析平臺;二是建立省級和市級的注冊會計師行業數據審計分析平臺。在此基礎上,各省、市注冊會計師行業的大數據審計分析平臺整合到注冊會計師行業審計數據分析平臺。如果沒有行業監管,那么審計市場將是一個混亂。因此,加強對行業的監督管理,也是一項必要性工作,包括行業協會的監管和行業自律監管。最好由行業協會或行業主管部門和領導的創立,聘請第三方進行數據維護,這樣同時有利于研發投入審計技術。
3.推動大數據審計分析模型和審計軟件的開發
行業不同需要的大數據分析模型和發展環境也不同,注冊會計師審計行業需要加強對大數據分析模型的研究和軟件開發,其中要結合著自身特點。大數據審計分析平臺能夠真正發揮注冊會計師審計領域的作用,關鍵是要有多個可以有效解決實際問題的數據挖掘分析模型或系統審計軟件。詳細的合作方式應審核實踐專家提供的審核問題需要解決和明確的前瞻性需求,由專家在學術研究中和數據分析工作中加強數據分析數學模型的構建和相關軟件的研發。
4.加強對大數據的理解和應用能力
大數據時代是一個新的視野,它將轉變生活方式,工作和思維方式,在這場巨大的技術革命中,能夠抓住機遇的人,就能成為大數據或強大的數據分析計算能力的擁有者,就可以在未來的競爭中取得勝利。但是,只有審計經驗和少量的數據信息或簡單的數據來進行審核工作,勢必會增加審計風險。因此在大數據時代,會計師事務所必須制定長期戰略目標、加強對大數據的全面認知,將云審計納入事務所的使命和戰略目標,從而實現長遠利益。而且可以針對個別項目進行大數據審計試點,以培養出更加具有數據分析能力的專業的審計人員。
四、結語
總之,大數據技術的不斷發展給審計工作帶來了新的契機,使審計工作走向精細、科學、高效,這就要求審計人員在面對新時期的具體工作時,應該樹立持續發展的理念,抓住大數據技術對審計工作帶來的契機,不斷在審計思路和審計方法上進行創新,最大限度地利用大數據帶來的機遇,爭取不斷提高注冊會計師在大數據時代的執業能力。
[參 考 文 獻]
[1]文峰.云計算與云審計――關于未來審計的概念與框架的一些思考[J].中國注冊會計師,2011(2):34-36
[2]鄧川,楊文鶯.基于云審計的會計師事務所機遇、挑戰及對策[J].財會通訊,2012(10):83-84
大數據時代的概念與特征范文3
【關鍵詞】大數據 企業管理 問題 對策
“大數據”起源于上個世紀90年代初期,現如今這一詞匯被抄得沸沸揚揚,它是大數據技術與云計算、互聯網技術相互滲透融合的產物。在商業領悟中,它作為一種形式新型的資源,為企業活動帶來生機與活力的同時,增加了企業管理工作的難度。本文淺談“大數據”的概念與屬性特征,繼而解析大數據環境下企業管理中面臨的主要問題,最后提出解決問題的對策。
一、淺談大數據的概念與特點
概念的呈現可以將事物的基本屬性展現出來,數據“Date”在拉丁語中被譯為“已知”,也可以被譯為“事實”。大數據(Big Date)分為廣義與狹義兩種內涵,廣義的概念包括大數據技術、工程、科學以及大數據資料應用的范疇;狹義的概念獨指大數據技術在運用的過程中獲得有效信息的能力。
大數據的屬性特征可以歸結為以下五點:規模大、多元性、分析速率快、數據信息資料真實度高、數據資料實用價值大。
二、列舉大數據環境下企業管理中面臨的相關問題
1.管理者大數據思維模式不完善
現如今各領域中都可以看到大數據翻卷的海浪,大數據是一種應用工具的附著體,也是一種復雜化思維模式的外在表現形式。企業管理者因為沒有構建完整的大數據思維模式,所以不能對數據資料進行精準的分析工作,此時企業管理者重定量而輕定性,在分不清數據系統的結構、數目或者屬性的情況就下結論,最終致使分析結果缺乏準確性;此外思維的不完善致使有些數據信息被遺漏,這是因為企業管理者過分的重視因果關系,一門心思想要知道“為什么”,而不去探究“是什么”。總之企業管理者缺乏大數據思維模式,久而久之會導致企業管理與營銷事業一片狼藉,大數據也不能發揮自身的性能為企業服務。
2.企業管理者進行資分析工作開展得不到位
盡管在某種程度上,大數據使我們的生活面貌發生改變,但是我們應該以理性的思維去看待大數據,意識到大數據分析也存在不足之處。企業管理者可以在大數據的輔助下對營銷走向、商業決斷、銷售策略開展做好提前規劃與處理工作,但是在對具體商業活動進行預計揣測工作時,企業管理者不能依賴大數據分析,如果對大數據分析產生依賴性,不確定性就會應勢而生,業務形式出現多樣化,此時人的情感價值觀更具復雜度??傊诖髷祿治龀涑庵萍s性的條件下,給企業管理者的決策帶來了困擾,這也是大數據在企業應用過程中產生的最為明顯問題。
3.企業管理模式死板,缺乏靈活性
大數據時代的來臨,使機械化的企業管理模式受到很大的沖擊。盡管在互聯網技術的配合下,大多數企業企業的管理模式積極踐行數據信息的發展路線,但是傳統的管理思想以及思維模式根深蒂固,再加上專業操作性人才的短缺,致使很多數據信息缺乏及時性和精準性。在大數據環境下,尤其是金融與媒體企業的管理工作受到嚴重的打擊,使企業整體事業的運營與發展受到一定的阻礙。
三、探究使問題得以解決的對策
1.使企業管理模式轉向為淺度扁平化管理
大數據時代的到來,使企業管理者深度縱向的管理模式發生扭轉,他們不必將決策信息一級一級的傳達,保證了數據信息的時效性,使企業管理者擁有更多的時間去解決管理進程中遇到的問題。那么所謂的淺度扁平化的管理模式是什么樣的呢?作者引入下圖“扁平化的信息傳遞”模式,以待論述更具說服力。
這一管理模式也可以被視為一種管理理念,它在企業管理工作中的應用優化了該企業層級之間的結構框架,在現代信息化技術配合下,企業管理者能夠在極短的時間內容獲得最為真實的信息。此外該管理模式的搭建使企業管理者隨時能夠對企業員工的動態進行掌握與分析,也能夠協助企業管理者完成對技術員工業務操作情況的監管與規劃工作。這是大數據環境下企業管理性質的改變。
2.真正落實科學決策這一管理方略
在大數據環境中,企業管理者的思維模式得到了更新,他們不再對問題進行刨根問底,節約了時間去完成數據分析工作,這大大提高了分析數據的精確性;此外科學決策還表現在企業決策主體的大眾化,不只是企業高層管理者與業務精英共同完成戰略發案的編制以及決策工作,“普通大眾”的參與使企業管理在運行的過程中數據信息來源路徑實現多樣化,此時在大數據環境下,信息的完整度以及真實性有了一定的保障;此外事先預測工作的開展,使海量的數據信息的應用價值明確化,保證了企業管理者決策工作的時效性以及精準性,在大數據環境下事先預算工作體現出時效性、動態性、有序性的特點,在事先預算工作的協助下,企業管理以及決策工作注入了新型的推動力。
3.數據可視化工具的應用緩解了企業管理工作中的難題
大數據時代的概念與特征范文4
隨著我國互聯網的發展,云計算、物聯網已成為耳熟能詳的詞匯;但是對大多數人只是聽過這些詞匯但是卻不能理解他們的含義。大數據時代已成為一個不可阻擋的趨勢,對于圖書館服務行業來說是一種機遇也是一種挑戰,圖書館行業的發展應該主動面對這一現狀,應該主動面對大數據時代所帶來的挑戰,積極應對。我們都知道現階段數據的發展以冪指數方程的趨勢發展,大數據時代將成為圖書館行業發展的核心,因為它支撐著圖書館在新時期下的發展。但是面對這一大數字時代帶來挑戰,應如何積極的面對,成為圖書館發展行業首要考慮的問題。本文主要針對這一問題進行討論,望能夠找到有效的解決方案,促進圖書館行業的發展。
1 什么是大數據時代
1.1 大數據時代的概念
對于很多人來說,大數據時代這一詞匯是很熟悉的,但是對于它的含義確是很陌生的。大數據時代其實很難用一個完整的定義,我們通??山忉尀椋捍髷祿˙ig data)通常用來形容一個公司創造的大量非結構化和半結構化數據,這些數據在下載到關系型數據庫用于分析時會花費過多時間和金錢。大數據分析常和云計算聯系到一起,因為實時的大型數據集分析需要像MapReduce一樣的框架來向數十、數百或甚至數千的電腦分配工作。從這大數據時代的解析我們能夠看到,大數據時代不是單單的一種技術,但是各種信息的綜合體,是一個巨型的資料庫。
最早提出“大數據”這一詞匯的是一個全球知名咨詢公司麥肯錫,他表示到:數據已滲透到各個領域,成為促進社會發展的重要因素。面對這樣的形式,人們加以合理的利用海量的數據資源,將會把世界的發展推向一個新紀元。
1.2 大數據時代的特點
我們由大數據的概念很容易的了解到,它是一個多種數據庫的聚合體。有些人就根據大數據的概念將其特點歸結為一下三點:量大、多樣、實時,有人直接將這三點簡單的成為3V特征(三個特征的首字母都是V開頭,簡稱為3V)。但是我認為大數據時代的特點除了這三點外還其他的,諸如數據價值密度高、處理數據快的特點。因此大數據時代特點我們可以總結為:①數據量大,也就是說數據的體量大,對于體量的衡量我們已經不能用傳統的衡量方式了。②種類的多樣性,大數據庫的種類包含眾多的行業,多個領域,而且具有文本、圖像、影視等多種樣式,這一特點尤其適用于圖書館的發展;③更新速度快,也就是我們說的實時性,大數據的更新每時每刻都在發生,保證了數據的實時性。④數據的價值密度高,涉及到傳輸、決策、感知、控制開放式循環的大數據,大量的不相關信息對未來發展模式和趨勢的可預測性分析起著至關重要的作用。⑤處理速度快,數據持續到達,數據分析要求實時處理而非批量式分析。
2 大數據時代下圖書館面臨的機遇與挑戰
我們由大數據時代的特點可知,隨著大數據時代的發展,處理速度和更新速度使得其利用價值在不斷地上升,在大時代數據對圖書館行業的發展有著很大的影響。
2.1 大數據時代下圖書館面臨著挑戰
在新的時代下要求圖書館服務行業要對其圖書館內部資料有一個充分的了解,而且這種了解要緊緊跟隨著圖書館內部資料的更新不斷改變。傳統的圖書館服務行業的特點就是人工管理占很大一部分,數據更新速度差,管理效率低下,比較浪費時間;由于人們對知識的渴望,圖書館的作用越來越大;圖書館場地的局限也是一個重要的問題;大數據時代的高效性、實時性是傳統的圖書館服務行業所不能比擬的,如何在大數據時代下更好的發展圖書館服務行業成為一個重要的問題。
2.2 大數據時代下圖書館面臨著機遇
其實在大數據時代下圖書館的發展,機遇與挑戰而言,機遇所占的比例不少于挑戰的比例。大數據時代下數據形式有多樣化、信息更新的實時性、快速的處理速度,大數據這些特點都將會促進者圖書館服務行業的發展,未來會成為圖書館服務行業發展的核心部分。
3 圖書館行業應該如何應對大數據時代下的影響
面對大數據時代下的機遇與挑戰,圖書館服務不能坐以待斃,應該積極的面對挑戰,勇于創先,實現機遇利用率的最大化。
3.1 創新圖書館管理方式,提高圖書館的智能化管理水平
傳統圖書館管理模式已不能適應快速發展的社會,對于圖書館的管理,我們應該做到與時俱進。創新圖書館的管理方式是適應社會發展的必然趨勢。我們可以充分利用大數據時代量大、快速、實時的特點,提高圖書館的智能化管理水平。數字化時代,文獻資源等進行數字化、語義化處理是圖書館進行數據處理的主要模式,在此基礎上借助網絡服務,實現數據共享,從而最大程度滿足用戶需要。
大數據時代的到來可以快速的提升圖書館的服務水平,大數據可以以最快的速度更新圖書館的資源,并對資源進行分類,讓人們根據自己的喜好可以快速的篩選出所需要的種類,節約借書人時間的同時也減少了圖書館行業的壓力。
3.2 高度關注圖書館用戶數據和信息
為了迎接大數據時代下挑戰,要提升圖書館服務質量;我們首先要注重的就是用戶的需求。我們都知道大數據內的資料很多,但不一定都是客戶們需要的資源。因此我們要做到盡可能的滿足用戶們的需求。
做好用戶們的需求我們就要做好以下幾點:①根據用戶們的網頁訪問數量,統計、整理出哪些資源是比較受歡迎的,對其M行大量的收集。②了解用戶的愛好和價值取向,根據其不同的喜好可以向不同的人群進行資料的推薦。
4 總結
在大數據時代下,雖然圖書館服務行業受到了很多的挑戰,但是同時也遇到了很多的機遇,我們要相信,隨著圖書館服務行業的不斷發展和創新,一定能跟隨時代的潮流,為我們提供更優質的服務。
參考文獻
[1]韓翠峰.大數據時代圖書館的服務創新與發展[J].圖書館.2013(01)
大數據時代的概念與特征范文5
大數據,作為一種數據管理的理念和方式,其之所以出現,是云計算和物聯網等信息技術的發展,與人類社會所積累的數據高速增長并海量積累相結合的結果。無論是如何定義,從本質上,大數據是信息管理者在當今的信息技術條件下,為解決新的海量信息處理需求,所提出的解決策略。而作為典型的信息管理活動之一的檔案事業,勢必會受到大數據理念的影響。
大數據并不是一個嚴謹而完整的學術概念,其所包含的內容相對比較抽象,從字面意義上進行理解,大數據所指的是數據規模的龐大。但從這一意義上來看,顯然無法與傳統的以往一系列概念進行區別,如“海量數據”(Massive Data)、“超大規模數據”(Very Large Data)。在學術界,對于大數據的定義尚未形成統一的觀點,但綜合各種說法,主流的思路是從大數據的特征出發,通過歸納的方式,通過對特征的描述進行定義。其中最有代表性的是3V定義[1],即認為大數據需滿足3個特點:規模性(Volume)、多樣性(Variety)和高速性(Velocity)。此外在實踐層面,普遍認為大數據具有全數據規模、多數據類型、低價值密度、高處理速度的特點。
在數據管理理念層面,大數據的特點在于全數據規模、豐富的數據類型(可能包含半結構化數據)、全數據處理對象、多數據處理工具;在數據處理技術層面,大數據體現為對云計算和新一代數據庫的應用;在操作方式層面,大數據體現為對零散信息價值的重視及對數據之間相關而非因果關系的分析。
二、大數據對檔案工作帶來的機遇
(一)解決信息化背景下檔案的“脹庫”問題
近年來,隨著電子文件的理念逐步得到認可,以及檔案的單位管理成本的降低,加之人們對于歸檔保存的重要性的認識的提升,我國的檔案總量步入了一個高速增長的時期[2],但與此同時,信息化背景下的檔案數據庫脹庫問題也隨之到來了,其中較為明顯的表現為“新增數據失敗”等[3],脹庫問題帶來的,不僅僅對新增檔案管理上的難題,同樣重要的是,由于脹庫現象的出現,檔案的服務利用的效率將大打折扣,其原因在于案卷在出現脹庫的過程中,無法及時有效地歸檔并建立索引以提供服務,破壞了檔案案卷之間的連續性和關聯性,降低了檔案中所提供的信息的價值。信息化背景下檔案的“脹庫”問題,本質上在于存儲和計算資源分配的不夠合理,傳統的數據庫架構在處理新的海量數據的過程中,靈活性遠遠不夠。解決這一問題,需要求助于大數據技術框架中的云計算技術[4],利用云計算技術強大的調配計算資源的能力,根據數據處理規模的需要,配置數字化檔案管理所需要的存儲和計算資源,保證檔案的服務利用效率。
(二)有利于推動社會檔案觀的普及
大數據的核心在于從海量的數據中挖掘價值[5],這為檔案價值的進一步發現和提升,提供了一個新的思路。傳統的檔案服務利用概念中,檔案的服務利用對象是特定并且相對單一的,原因在于檔案通過卷宗的形式,將一個相對完整的信息“包裹”存留,這部分相對完整的信息最終成為了檔案卷宗的主題。而在服務利用的過程中,“主題匹配”成為了最為常見的檔案定位方式,而主要來自于政府機關、企事業單位的日常運行信息形成的檔案,其主題自然會牢牢地與其形成機關的業務活動相對應,而檔案卷宗中所包含的零散的信息價值,相對容易被忽略,如今被公眾廣泛利用的檔案,多數是民生檔案[6],而其他類型檔案中的零散信息價值,缺乏有效的挖掘服務利用手段,這是社會檔案觀在普及過程中必須解決的問題之一,即如何幫助公眾挖掘他們所關心的分散于海量檔案中的信息價值。大數據為檔案的服務利用提供了新的價值挖掘工具,使得分散在海量數據中的零散價值成為可能,這就意味借助大數據的信息分析工具,公眾將能夠從主題上看上去并不相關的眾多檔案中,發掘其自身所需要的信息,獲取相應的信息價值,將推動公眾逐漸意識到檔案作為當今社會最重要的信息價值載體之一的重要意義,而一旦這樣的意識逐步成型,檔案社會觀將得到普遍的認可。
(三)有利于處理多載體類型的檔案
信息技術的發展對于檔案管理工作的重要影響之一,就是提供了多樣化的信息載體形式,豐富了檔案的類型,從最原始的紙質載體的文書檔案,發展到如今的音像檔案、圖片等等。而隨著電子文件概念不斷獲得認可,新的信息載體形式層出不窮,從理論上講,每當出現一種新的信息載體形式,就會相對應地出現該載體形式的檔案。這就意味著未來檔案的管理工作必將是基于多載體的,其載體的豐富程度可能會遠遠超過我們的預期,而為最大程度保證原始證據價值,在技術條件允許的前提下,未來的檔案管理工作將會嘗試接受半結構化的數據作為檔案,以最大程度地保留證據價值[7]。這使得未來的檔案載體形式將呈現數量多、增長快的特點,這就要求針對具體檔案類型的管理工具,或者抽象為一類特定的數據處理工具,是無法實現“One size fit all”的,即不再存在能夠完美處理所有的檔案載體類型的管理工具。這一點上與大數據對處理多數據類型過程中所提出的數據工具組合的理念,是相一致的。未來的檔案服務利用活動,由于其面向的檔案對象的載體是多樣的,對其進行利用的工具也將是多樣的,甚至為處理一些半結構化的數據的過程中,可能會需要多種數據處理工具的組合。
(四)有利于電子文件的管理
大數據將從真實性、有效性、及時性三個方面提升電子文件的管理水平。首先從真實性角度考慮,由于電子文件驚人的增長速度,其真實性鑒定工作一直是困擾檔案工作者的難題之一,傳統的“直接鑒定法”在實際操作的過程中所消耗的人力物力成本過于巨大[8],因此鑒定文件的真實性需要求助于大數據技術處理海量數據并分析復雜數據的能力;第二,從有效性角度考慮,電子文件的結構化特征并不明顯,大量的電子文件都是半結構化甚至是非結構化的,在這種數據類型情況并不穩定的前提下,處理數據對象單一的傳統檔案管理數據庫結構是難于駕馭的,而大數據技術框架下對于多數據結構的兼容性,能夠較好地解決這一問題,提升對電子文件進行管理的有效性;第三,從及時性的角度考慮,電子文件的指數增長,使得及時地對新增檔案進行管理成為了檔案工作者所面臨的一大難題,這樣的海量數據的實時處理,是檔案管理過程中前所未有的,這需要利用大數據技術框架中通過云計算的方式提升數據處理的及時性,才能保證電子文件管理的及時性。
三、大數據背景下檔案工作的發展趨勢
(一)從數字化到數據化
為應對信息時代對于檔案工作新要求,檔案數字化的工作已經進行了多年,并在一定程度上解決了傳統檔案利用信息技術進行管理及共享的問題[9],收到了相當的成效。但在大數據時代背景下,數字化僅僅是解決了載體形式或者說是信息技術的應用問題,可以理解為檔案工作對信息技術的適應性應用,對于深入的數據挖掘與利用是遠遠不夠的。在大數據的時代背景下,信息管理者已經不再滿足于更易管理和共享的信息形式,應更為關注信息所能帶來的價值,這就要求對于檔案的管理工作框架,需要實現從數字化到數據化的轉變,即不僅僅能夠實現對檔案案卷的數字化管理,更能夠根據海量數據挖掘利用的需要,對檔案的管理深入到數據層面,這將更為適合大數據技術架構下對數據的“流處理”模式。
(二)從信息共享到信息價值共享
隨著大數據時代的到來,數據挖掘技術的應用進入了一個全新的階段,所有的信息管理者都面臨著同樣一個問題:將簡單而直接的信息共享活動轉換為更為高級的信息價值的共享,即需要對自身所掌握的信息的價值有清晰的掌握和準確的理解,對應到檔案工作者的現狀上,即檔案工作者僅僅了解自己在管理哪些檔案并提供服務利用,已經無法適應大數據時代對檔案服務利用的要求了,而需要能夠了解自己所掌握的檔案能做什么,所提供的檔案利用服務所實現的是什么功能,也就是要明確所掌握的檔案的價值。這需要對檔案利用服務的認識有更加深入的認識,在大數據時代的背景下,由于對信息價值提取效率的提升,對于信息價值的共享將成為所有信息服務利用的主流趨勢,這對檔案服務利用工作將是全新的挑戰,這不僅僅要求能夠靈活地運用大數據技術在整合檔案數據的基礎上挖掘其中蘊含的價值,更加需要檔案工作者對于信息價值有著更為敏感的“嗅覺”。
四、大數據對檔案工作帶來的挑戰
(一)如何嵌入數據挖掘環節
傳統的檔案管理活動,最為通行的說法是包含收集、整理、保管、鑒定、統計和提供利用六個主要環節,這六個環節組成了基本的檔案管理活動,并組成了一次完整的信息從收集到提供利用的過程。在大數據的時代背景下,對于檔案管理活動提出了新的要求,即主動地挖掘其中的價值并提供利用服務,這就涉及到一個流程嵌入的問題,即數據挖掘環節應該通過什么樣的方式嵌入到檔案管理活動中來,是作為一個單獨的環節嵌入到檔案的管理流程之中,還是在傳統的檔案管理活動的某一環節中實現數據挖掘的功能,直接關系到檔案管理活動流程的合理性。數據挖掘的嵌入問題,當檔案事業逐步步入電子文件時代之后,必須要解決的問題。
(二)如何保障檔案信息的安全性
大數據對于檔案信息的共享程度提出了更高的要求,只有在檔案資源高度共享的情況下,大數據技術框架下的云計算平臺才能發揮作用,真正實現檔案信息價值的利用。但隨之而來,就是檔案信息的安全性問題,如何解決在多類型、多結構、高共享程度狀態下的數據安全問題,已經顯得十分棘手。工作人員操作失誤、設備及網絡故障、計算機病毒、網絡黑客攻擊等對檔案信息安全構成威脅的因素,在大數據的技術框架下,所造成的威脅可能會被相應地放大。大數據時代的檔案信息的保密工作,其重心很有可能不再是保密體制的設計,而更有可能是信息安全技術的有效應用。
大數據時代的概念與特征范文6
【關鍵詞】 大數據 信息化建設 個人隱私 保護
一、引言
如今,隨著信息技術和網絡技術的不斷發展,互聯網已經成為人們生活中不可或缺的重要元素,但是人們的上網瀏覽記錄中隱藏著大量的個人信息,一些不法分子利用這些數據信息進行違法犯罪行為,損害了公民的合法權益,也進一步擾亂了正常的網路秩序,這些都是亟待解決的問題。
二、相關概念的界定
2.1個人隱私的概念
個人隱私伴隨著人類文明的出現而出現,是人類文明的重要標志,通常開說,個人的私人生活和安寧不受到他人的非法干擾,私密信息保密不受到他人的非法搜集、探秘和公開,個人的利益得到合法保護。保護個人隱私不受侵害是公民具有的基本合法權益,在現代社會,尤其是西方經濟發達國家,保護個人隱私已經成為公民的基本常識,侵害個人隱私行為將會受到法律的懲處。
2.2大數據的概念和基本特征
大數據概念起源于美國,基本含義是所涉及的規模巨大到無法通過人工在合理的時間內達到截取、管理、處理和整理的人類所能解讀的信息。大數據是伴隨著計算機和互聯網技術的出現而發展起來的新興事物,在大數據時代下,互聯網安全受到前所未有的挑戰,很多互聯網公司都掌握著大量的用戶個人信息,這些信息一旦泄露,必將給違法分子以可乘之機,正常的社會秩序也將被擾亂,嚴重影響了地區經濟發展。
2.3大數據下個人隱私的新特點
①隱私的數據化。大數據下個人信息的典型特征就是隱私的數據化,這也是與小數據時代的根本區別所在,個人隱私隱藏在數據化的個人信息中。②隱私的商業化。在大數據時代下,泄露的個人信息很有可能被二次利用,或被私底下進行交易和轉讓,為不法者謀取不正當的經濟利益。③隱私換取個性化服務。一些互聯網商家為我們提供貼心的個的同時,用戶地瀏覽數據也被商家進行采集和分析,預測用戶的行為,從而實現精準營銷。用戶實際上是用自己的個人信息換取了商家的個性化服務。
三、大數據時代下保護個人隱私的重要舉措
3.1完善個人隱私的相關立法
個人隱私作為公民的合法所有物應該受到法律的保護。在日益復雜的網絡環境下保護個人隱私不受侵害的首要條件就是要建立健全的相關保障性法律,為公民尋求法律保護提供支持。從現實情況來看,我國在保護個人隱私方面有四十多部法律,但是這些法律的出臺首先只是約束個人,對企業和國家機關的約束力度不夠。我國立法機關一定要提起對這一問題的高度重視,從我國國情出發,根據人民的意愿逐步完善相關法律體系的建設,加強對機構行為的約束力度,同時掌握公民最大、最全數據的政府機構更應該成為法律約束的重點對象。同時在大數據時代下應該充分考慮大數據的特性,擴寬個人數據的外延,用法律手段維護個人的權益不受損害。
3.2加強行業自律性建設
加強行業自律是預防隱私侵犯行為發生的最行之有效的辦法之一。在大數據時代下,相關互聯網企業應該提升自律精神,加強自身思想道德建設,在遵守個人隱私數據相關法律相關條文的前提下,采取一定的自律措施來規范對消費者個人數據的使用行為。企業只有提升了對自身行為的自律性和自省性才能從根本上杜絕侵害消費者個人信息的行為,維護正常的社會秩序。
3.3提升公民的個人信息保護意識
公民自我保護意識的提升也是解決當前大數據時代下個人信息泄露的關鍵因素。我們生活在大數據時代下,個人信息難免會受到智能設備的監控和采集,需要提升自身的隱私信息保護意識,學會辨別信息,對相關信息被儲存和挪用有一個清晰地認識,有節制的讓自己的數據被記錄。
四、結束語
總的來說,大數據的個人隱私保護還處于起步階段,盡管隱私保護對用戶來說是一個重要的問題,對于廣大的用戶通過實行全民教育與技術防范同步的方式,提高人們對個人信息的自我保護意識,進一步規范互聯網公司相應的經營管理行為,維護正常的社會秩序,保護公民的隱私權不受侵害。
參 考 文 獻
[1]劉雅輝,張鐵贏,靳小龍,程學旗. 大數據時代的個人隱私保護[J]. 計算機研究與發展,2015,01:229-247.
[2]黃成鵬. 大數據時代的個人隱私[D].華中師范大學,2015.