前言：中文期刊網精心挑選了大數據時代的應用范文供你參考和學習，希望我們的參考范文能激發你的文章創作靈感，歡迎閱讀。
大數據時代的應用范文1
【關鍵詞】 數據挖掘 分析方法 應用
一、基本概念介紹
1、大數據。2011 年5 月，麥肯錫全球研究院在《大數據：創新、競爭和生產力的下一個新領域》中指出，大數據是一種規模大到在獲取、存儲、管理、分析方面大大超出了傳統數據庫軟件工具能力范圍的數據集合，具有海量的數據規模、快速的數據流轉、多樣的數據類型和價值密度低四大特征。數據已經滲透到每一個行業和業務職能領域，逐漸成為重要的生產要素；而人們對于大數據的運用預示著新一波生產率增長和消費者盈余浪潮的到來。據估計，在未來，數據將至少保持每年50%的增長速度。
2、數據挖掘。數據挖掘是一門新興的學科，它誕生于20 世紀80 年代，主要面向商業應用的人工智能研究領域.從技術角度看，數據挖掘就是從大量的、復雜的、不規則的、隨機的、模糊的數據中獲取隱含的、人們事先沒有發覺的、有潛在價值的信息和知識的過程.從商業角度來說，數據挖掘就是從龐大的數據庫中抽取、轉換、分析一些潛在規律和價值，從中獲取輔助商業決策的關鍵信息和有用知識。
二、數據挖掘的基本分析方法
分析方法是數據挖掘的核心工作，通過科學可靠的算法才能實現數據的挖掘，找出數據中潛在的規律。通過不同的分析方法，將解決不同類型的問題，在現實中針對不同的分析目標，找出相對應的方法。目前常用的分析方法主要有聚類分析、分類和預測、關聯分析等。
1、聚類分析 。聚類分析就是將物理或抽象對象的集合進行分組，然后組成為由類似或相似的對象組成的多個分類的分析過程，其目的就是通過相似的方法來收集數據分類。它是一種無先前知識，無監督的學習過程，從數據對象中找出有意義的數據，然后將其劃分在一個未知的類。這不同于分類，因為它無法獲知對象的屬性?！拔镆灶惥?，人以群分”，通過聚類來分析事物之間類聚的潛在規律。聚類分析廣泛運用于心理學、統計學、醫學、生物學、市場銷售、數據識別、機器智能學習等領域。 聚類分析根據隸屬度的取值范可分為硬聚類和模糊聚類兩種方法。硬聚類就是將對象劃分到距離最近聚類的類，非此即彼，也就是說屬于一類，就必然不屬于另一類。模糊聚類就是根據隸屬度的取值范圍的大小差異來劃分類。一個樣本可能屬于多個類。常見的聚類算法主要有密度聚類算法、層次聚類算法、劃分聚類算法、網格聚類算法、模型聚類算法等。
2、分類和預測 。分類和數值預測是問題預測的兩種主要類型。分類是預測分類（離散、無序的）標號，而預測則是建立連續值函數模型。分類是數據挖掘的重要基礎，它是對已知的訓練數據集表現出來的特性，獲得每個類別的描述或屬性來構造相應的分類器或者分類。分類是一種有監督的學習過程，它是根據訓練數據集發現準確描述來劃分類別。常見的分類算法主要有決策樹、粗糙集、貝葉斯、遺傳算法、神經網路等。預測就是根據分類和回歸來預測將來的規律。常見的預測方法主要有局勢外推法、時間序列法和回歸分析法。
3、關聯分析 。在自然界，事物之間存在著千絲萬縷的聯系，當某一事件發生時，可能會帶動其它事件的發生。關聯分析就是利用事物之間存在的依賴或關聯知識來發現事物之間存在的規律性，然后通過這種規律性進行預測。如經典實例購物籃分析，就是通過分析顧客購物籃中物品的管理規律，來分析顧客的購物心理和習慣，然后根據這種規律來幫助營銷人員制定營銷策略。
1、科學研究。在科學研究中，經常需要分析各種大量的實驗和觀測數據，并找出相關的規律和知識.這些數據分析和挖掘都需要一定的算法，利用數據挖掘技術能科學的找出數據之間的規律以及找出我們未發現的知識.例如，對外空星體的探索、對DNA 數據的分析等等.
2、制造業。在制造業領域，通過對零部件生產的各種數據分析，來提高生產效率和提高良品率，如分析造成產品缺陷的環節及數據，找出生產過程影響生產率的因素，暴露制造和裝配操作過程中變化情況等各種因素，從而通過重點改進相關環節及工藝，來提高企業的生產效率及利益.
3、電信業。近些年，隨著電信業的蓬勃發展，電信業的技術和服務已經成為一個非常龐大的混合載體，它不僅關系市場，也關系到技術及服務.在將企業有效資源整合，實現無縫連接的過程中，將產生大量的復雜數據集合，如何從龐雜的數據中找尋出規律和知識，已成為電信業的重要問題。通過數據挖掘的運用，能很好的解決上述問題，為行業的發展起到很好的作用，如系統負載、數據通信速率和容量、用戶行為、利潤率等；采用孤立點分析和聚類方法，查找出盜用模式和異常狀態；利用關聯和序列模式，找出影響電信發展的相關因素，更好的推動電信業務的發展。
參 考 文 獻
大數據時代的應用范文2
關鍵詞：數據時代 數據庫 技術應用
中圖分類號：TP311.1 文獻標識碼：A 文章編號：1007-9416（2016）11-0241-02
社會各行各業之所以可以不斷的改革和創新，與信息技術所具備的強大推動力有著密不可分的聯系，同時在其推動下人們也進入了一個全新的信息化時代，增加了人們在生活中所涉及到的方方面面的信息亮。人計算機數據庫技術的誕生為人們及時有效的管理這些信息提供了重要的技術支持。目前，在社會的很多領域比如：國防、通訊等行業都在大力的推廣數據庫技術，而這些也給人們的生活帶來了極大的便利。就目前這項技術發展的情況而言，這項技術不但可以完成對信息的及時有效處理，而且其也積極的推動了社會的發展和進步。
1 數據庫技術特點
數據的統一處理可以通過數據庫實現。在沒有廣泛的應用計算機數據庫之前，傳統的數據庫技術在信息處理時存在過于分散而且相互之間聯系不夠緊密的缺點，從而使得數據的作用沒有充分的發揮出來。而計算機數據庫則可以有效的在各個數據之間建立聯系，并利用相關的邏輯順序實現了數據結構模型的建立。同時數據庫中的各個數據又可以保持其獨立性，在進行某一數據的更改時不會對數據庫的整體結構造成影響。正是因為數據庫本身具備了數據的共享性，所以相關文件系統也就不用用戶自己建立，只需要其借助計算機進行所需數據的調取就可以了，這樣也就避免了信息重復。而且由于數據庫中相關的信息還具備了整體性、一致性以及獨立性，所以也進一步提高了數據調取和使用效率的提高。
1.1 組織性
數據庫內所有的信息都具有一定的順序和結構。數據庫中左右的文件和信息之間都存在著聯系，而且其排列也是按照一定的順序，從而組成了信息結構體系的整體性。而且存儲在同一數據庫中的信息都有相似的特點。
1.2 共享性
計算機數據庫建立的主要目的就是實現數據庫的共享。如果數據庫無法實現數據信息的共享的話，那么這個數據庫也就失去了建立的意義。具備良好共享性的數據庫不但可以進行內部信息的共享。而且和可以在不同的數據庫之間建立聯系，從而實現不同部門、不同個體之間的數據共享，甚至在不同的國家和地區之間也可以建立數據庫的共享。
1.3 獨立性
邏輯獨立性和物理獨立性是數據庫獨立所體現的兩個方面。可以隨意的改變某一個數據庫的邏輯結構就是我們所說的邏輯獨立性。比如，可以修改數據庫內部數據的性質，或者將新的數據添加到數據庫中，而且還可以調整數據的類型。而在調整這些信息的時候都不需要對原有的程序進行更換。數據的存儲結構發生根本性的變化就是我們所說的物理獨立性，比如，數據庫原有的邏輯結構不會因為存儲設備的更滑、存儲位置的更滑或者存取方式的改變等情況而受到影響，同時也不會將程序運行的方式有任何的改變。
1.4 冗余度的可控性
冗余指的就是數據庫中重復的數據。在需要對數據庫中的數據進行專用的情況下，用戶經常會在接收信息的過程中重復接收相同的數據，而此時也就出現了數據的冗余。而通過計算機數據庫技術的應用就實現了系統自動刪除重復信息數據的功能。而且，具體的操作人員也可以根據實際的需要保留一定數量的冗余數據，這樣不但可以提高數據查詢的效率，而且也更加方便了用戶的操作。
1.5 靈活性
數據庫不但要進行數據的存儲，同時好不想具備管理、編輯、輸入以及輸出等相關的功能，同時在實際的使用和操作時靈活性也相對較大。而用戶在使用的過程中可以根據自身的實際需要建立相關的信息數據庫，并可以隨時的調用數據庫中所存儲的相關數據信息。
2 數據時代數據庫技術的具體應用
目前使用的最為廣泛的信息管理手段就是計算機數據庫技術，這項技術最大的優勢就是提高了信息管理的效率，而且其在很多行業中都得到了廣泛的應用和推廣。數據存儲不僅可以通過計算機數據庫的應用得到滿足，同時其還提供了更加個性化的服務給用戶。就目前而言，計算機數據庫在應用的過程中主要有以下幾方面的特點：首先，用于對敏感、機密數據資料的處理中。計算機數據庫可以通過設置數據訪問的密碼、防火墻等方式確保信息的保密性，避免了機密的信息數據被惡意的竊取或篡改。同時其對于用戶個人的隱私也具有極為重要的作用，所以，計算機數據庫技術已經被越來越多的商業機構用來進行數據的存儲。其次，建立有效的數據模型。信息的內容不同其所具有的性質和價值也就不同，因此必須根據信息的特性對其進行分類和整理，切記不可所有的信息都采用統一的模式進行處理，只有這樣才能從根本上保證信息處理的質量，為后期的查詢與使用做好鋪墊。同時計算機數據庫技術還可以根據不同信息數據的特點按照需要迅速的建立數據模型，為人們查找數據提供了極大的便利。最后，保障數據信息的安全有效。安全管理信息是數據庫所具備的另一大特點，這一特點為數據的安全可靠性的提高奠定了基礎。目前，所使用的數據庫一般都具有信息自動備份和文件恢復的功能。即便系統因為意外而出現故障，也不會造成信息丟失。而如果系統受到外部入侵竊取者被惡意篡改時，通過對之前備份好的數據進行還原就可以得到原始的數據。而這些度不僅對數據庫的安全性提供了最大限度的保障，而且降低了因為數據故障而使數據安全受到威脅。
3 數據時代數據庫技術在應用趨勢
3.1 計算機數據庫技術在信息管理中的應用范圍日益廣泛
將計算機技術和數據庫技術緊密的結合，使得這兩種技術的潛能得到了充分的發揮，而且其應用的前景也極為的廣泛。隨著計算機數據庫自身應用范圍在商業、農業以及服務業等領域的不斷擴大，也進一步促進了相關產業管理效率和質量的提高，從根本上保證了產品的信息質量，而且也促進了相關產業的深化發展。安全性和實用性是計算機數據庫技術最大的特點，而且通過各個領域的推廣已經取得了顯著的效果，不僅獲得了各個產業的青睞，而且為這一技術的深化發展奠定了良好的基礎。
3.2 計算機數據庫技術在信息管理中的應用呈現出強勁的發展勢頭
在實際的應用過程中計算機數據庫技術的優勢已經越來越顯著，所以這項技術已經得到了越來越多的行業的應用和推廣。同時計算機數據庫技術在其實際的應用過程中也在不斷的進行自身的完善和創新，而這也促進了信息管理效率的提高。到目前為止數據庫技術已經經歷了幾十年的發展，可以將其發展階段分為：網狀數據庫的使用階段和層次數據庫的發展和使用兩個階段，目前為止，人們對于對象數據庫的應用已經極為的廣泛。數據庫技術在其不斷的發展和演變的歷程中技術日趨的成熟。而且經過不斷的實踐檢驗之后，其在信息管理方面的能力有了更進一步的提高。從而使得目前所使用的數據庫具備了更加便捷、高效、安全、穩定、操作性強以及穩定性高等優點，而這些優點對于其在各個領域的推廣和應用都具有極為重要的意義。伴隨著對媒體技術的迅速發展，在不久的將來。數據庫在數據的編輯、整理以及展示等方面的能力也會得到進一步的提升。同時將其與多媒體技術有效的結合之后，實現了對文字、聲音、影像等素材的綜合展現，而且還可以進行復雜信息的處理，而這些不但提升了這一技術在信息管理方面的應用力度，同時也擴大了這項技術的使用范圍?？傮w而言，數據庫技術與計算機技術不但會更加緊密的結合在一起，而且其應用范圍也會越來越廣闊。同時信息管理的前景和市場也會隨著計算機數據庫技術的應用而不斷的擴大，這項技術的身影會出現在農業、工業以及商業等眾多的領域，不僅從根本上提高了這些行業的信息化水平，而且也帶動了相關領域生產力水平和生產效率的提高。
3.3 計算機數據庫技術的系統安全性能不斷增強
計算機數據庫技術在信息管理中的功能，隨著數據庫安全性能的提升而得到了充分的發揮。利用計算機數據庫技術進行保密性較高的信息的存儲可以有效的避免安全風險的發生，使信息資源的價值得以充分的體現出來。而且計算機數據庫技術也具有便于管理的最大特點。數據信息利用計算機系統的備份功能進行備份從而避免因為誤刪信息而造成不必要的損失，同時也有效的降低了信息復制的成本。同時隨著計算時數據庫自身安全性能的不斷提高，也增強了其在數據保護時的效果，不僅過濾了非法的信息，而且對于危害數據庫安全的操作和行為也進行了有效的阻止。而計算機數據庫不較之傳統的安全保護手段而言，其不僅新增加了用戶賬戶、新型密碼等手段，而且還設置了更多的抵抗風險的系統，從而全面的提升了計算機數據庫的管理性能，為廣泛的推廣計算機數據庫技術奠定了良好的基礎。
4 結語
總體而言，由于我們處于信息化時代中，而且每天都會面對新的事物的信息，而這也就增加了人們每天生活中所面臨的信息量和數據量。而要想對這些信息和數據進行有效的整理和篩選就必須有先進的信息處理技術。所以將計算機技術和數據庫技術緊密的結合在一起，就可以將兩者的技術優勢充分的發揮出來，使其具備更加完善、高效、全面的數據信息處理功能，從而促進信息處理效率和質量的提高。
參考文獻
[1]金澈清，錢衛寧，周敏奇，周傲英.數據管理系統評測基準：從傳統數據庫到新興大數據[J].計算機學報，2015，01：18-34.
[2]劉海英.數據挖掘技術在警務數據分析系統的應用研究[D].吉林大學，2015.
[3]梁寧寧.基于標準數據建立企業集團數據倉庫及費用分析研究[D].重慶理工大學，2015.
大數據時代的應用范文3
斯蒂夫·道科多夫與羅瑞·道科多夫是一對生活在美國明尼蘇達州沃特金斯小鎮上的農場業主夫婦。農場共養殖了100多頭奶牛。當他家的兩個孩子離開他們的農場去上大學后，他們不得不開始考慮如何尋找替代的勞動力。本來，傳統的解決方案是要雇用幾名額外的臨時工，然而，道科多夫卻別出心裁的選擇了機器人—讓機器人幫助喂養奶牛，清潔谷倉，甚至可以幫助奶牛產奶。羅瑞說，“以前，奶農們每天都要花費兩次，每次三小時的時間用來擠奶。現在，我們早上醒來，機器人已經為所有的奶牛擠過奶了?！?/p>
俗話說，農場生活是簡單的，但運營一家奶牛場其實是相當復雜的。它不同于其他企業的運營，用來生產牛奶的“設備”是奶牛。奶牛必須要喂飽，還需要有良好的睡眠，它們每一磅體重的增加或減少都至關重要。因此，最終保證奶牛場正常運轉所要考慮因素的數目是驚人的。
在10月初威斯康星州麥迪遜城舉辦的美國工業最大的貿易展—世界乳品博覽會上，展示了目前最新的行業技術應用。
一家加拿大的名叫優質奶業（Dairy Quality）公司，最近推出了一款名為“牛奶監護人”的用來監控乳品質量的新產品。外形是一個黑色的小盒子，可輕松地夾在iPhone的背面。奶農只需要將從奶牛身上取下的牛奶樣本的塑料收集片插入這個小盒子，這一設備立刻就可統計出樣本的體細胞指標數（高體細胞數可以是乳腺炎—感染的組織的一項指標）。以前，檢測體細胞數需要將牛奶樣本送到異地的實驗室并等待一周甚至更長的時間才可得到結果；現在，只需要用顯微鏡及這個應用，牛奶監護人就可以在6秒或更少的時間內就可分析出所放上的標本。配件及應用軟件的綜合成本合計1，800美元。
在世博會另一個最熱鬧的展位之一就是荷蘭乳品設備制造商萊伊公司，最吸引人的展示是一個稱為“A4宇航員”的喂奶機器人，這是道科多夫夫婦在他們的農場使用系統的更新版本。在奶場引入這套機器人喂奶機的好處在于，奶農從此就基本不需要再進入奶場來給奶牛擠奶了—這套系統大約需要200，000美元。A4的另一端有飼料槽，是一個封閉的小區域，在兩次擠奶過程的間隙，這臺機器還可用來喂飼料。奶牛發現這里有糧食，自己就會主動進入這個區域了。當它咀嚼的時候，一只不銹鋼及碳纖維制的長臂就會延伸到牛的下面，通過激光掃描，自動識別奶牛的四個位置，自動吸附并開始擠奶。當完成擠奶時，飼料槽移動，大門打開，奶牛重新回到谷倉的牛群中。而后，A4機器自動清理，重新歸位，準備迎接下一只奶牛。
這樣，農場的奶農們不必每天辛苦得天還沒亮就起來擠奶了，此外，更為重要的是這套系統可以方便地收集到每頭牛的數據。A4掃描牛的后頸，利用無線電波或紅外燈來識別不同的動物。下一步，在擠奶的過程中，系統會自動跟蹤其他幾個參數：牛的重量，擠出的牛奶，擠奶所需的時間，以及牛所吃的飼料—甚至通過對牛的特定后頸上的音頻傳感器，還可確定牛在反芻食物上所用的咀嚼時間。
大數據時代的應用范文4
在大數據時代下，信息在迅速的發展，隨之信息的重要性也日益顯著。所以在這種背景下，醫院的必然發展趨勢就是在對檔案信息進行管理時進行大規模信息利用開發。為了讓醫院的檔案信息更加具有廣泛性、主動性、時效性、針對性，就應該把大數據中的多媒體技術應用進去，這樣不僅可以為檔案信息的管理提供很大的技術支持，還可以對檔案信息資源另外通過多媒體電腦，我們在進行豐富多彩的檔案資源的獲取時也會變得非常便捷。
在現代化的大數據背景中，隨著網絡技術和數字化技術越來越趨于成熟，而醫院也開始出現大量的電子文件，因此醫院不僅要對檔案室的傳統體裁的檔案進行保護，還要對記錄數字化的管理。數字化這一功能給檔案室帶來的必然是功能擴大，而且還會讓其更加廣泛的影響和作用于醫院的信息管理中。但是在進行檔案數字化的過程中會遇到不同的瓶頸和困難，如技術不過關、法律不夠完善、個人的信息化水平有限、數字化差距較大等等，所以目前做主要的就是在大數據時代背景下加快多媒體技術在醫院檔案信息化的應用建設這一間距的工程，一旦完成這一工程，最終就會實現醫院檔案信息共建共享。
1.簡述多媒體技術
1.1什么是多媒體技術
利用計算機技術對資料信息中的視頻、動畫、圖形、聲音、圖像、文字等進行恢復、傳輸、加工、存儲等處理，能夠把這些資料信息完全轉化成二進制代碼，并且利用放映機和計算機等將其播放出來，從而實現人機交互，這就是多媒體技術，并且還是一種新型信息技術。電纜、電磁波、磁盤、磁帶、光盤、計算機等都屬于多媒體技術中的主要媒介載體。
1.2多媒體技術的特點
在大數據的時代背景下，多樣性、分布性、集成性、交互性、實時性和可包裝性是目前的多媒體應用過程中存在的主要特點。多媒體技術能夠把文件資料的全部內容進行匯總統一，在一個系統中再對其進行存儲和整編，這樣人們就可以更加全面、方便地對資料信息進行調閱、查看和修改，從而能夠在很大程度上對工作的水平和效率進行提高。
1.3大數據時代多媒體技術在醫院檔案信息化的應用意義
多媒體技術在醫院進行檔案信息化的建設過程中體現出了顯著地促進和推動作用。它主要有以下兩點應用意義和應用價值：一是把多媒體技術應到檔案信息化建設中，能夠把多媒體的接受度高、傳播迅速、直觀性強、信息量大等優點充分地發揮出來。另外還能夠將檔案信息化管理的工作水平和效率進行不斷地提高。進而把檔案信息化管理工作中的一些流程和操作步驟進行了簡化，能夠使用戶更加方便地查閱和維護檔案信息。二是把多媒體技術應用到檔案信息建設化中，能夠讓當前的檔案信息管理工作跟上大數據時代的步伐，更好地適應現代化發展，在醫院擴建中與之相關的大量管理資料和人員檔案以及醫療檔案的要求?M行滿足。使得不同科室以及患者在對相關的檔案信息進行查詢利用時更加方便高效，從而減少了檔案信息管理的工作量，節省了檔案信息的存儲空間，使檔案信息化管理的質量和效率都得到了提高。
2.大數據時代多媒體技術在醫院檔案信息化的應用
2.1對空間的占用有所減少，儲存能力有所擴大
我們現在的社會在向大數據大方向發展，檔案的數量一直在增加，而傳統的紙質檔案占據了相當大的空間，這就導致庫房空間越來越小受到了限制，所以這就大大阻礙了檔案的保管工作。在這種不利的形勢下，就要求我們尋找一種能夠符合大數據時代要求的存儲設備，并且要求該種設備安全性較強，存儲量也足夠大。多媒體技術的應用不僅可以全方位地傳輸多種類型的信息，還能夠非常方便地進行檔案的存儲。對于大量的不同種類的數據多媒體技術也能夠處理，所以這種技術未來的發展方向是更加多樣化的。在這種背景下，光盤存儲就誕生了。光盤存儲的載體是激光介質，其優勢是有著較大的存儲量，并且還有很強的操作性和可靠性，信息檔案工作的成本投入也會有所減少。
2.2對檔案信息載體的多媒體化起到了推動和促進作用
大數據的時代背景下的在檔案信息載體的多媒體應用中起到了非常關鍵的推動作用，特別是當聲像技術和電子圖文顯示技術出現的時候，檔案信息的密度隨之提高，存儲量崔志增大。同時傳統的紙質檔案也在轉向電子檔案。其中多媒體電子文件的一個非常重要的載體就是CD-RO光盤，該光盤的最大優勢就是有著非常大的存儲量，在進項信息的查詢和檢索過程中也有突出的優勢，還展現出了人機界面的聲像，以上所說的這些優勢在傳統的紙質檔案中是不存在的。多媒體信息主要是以電子文件的形式進行傳播的，所以檔案信息的電子化是需要多媒體技術的推動，從某種意義上來說也推動了大數據時代多媒體技術在醫院檔案信息化建設的應用。
2.3對檔案信息管理能力有了提高
要想更好地改進和完善檔案管理工作，對簡化歸檔程序采取有效的措施是一個非常重要且有效的途徑，在檔案工作中最基礎的一項工作就是歸檔，在檔案庫中每年都會有很多的檔案需要納入，這樣就會有大量的工作需要檔案部門和文書處理部門完成。而且在歸檔這一項工作中會耗費很多的時間，而多媒體的出現則克服了這種困難，它可以更簡單便捷地進行歸檔工作，借助多媒體技術可以更直接更方便，另外而很多時間都要放在歸檔工作中，多媒體技術的出現使得歸檔工作更加簡單便捷，根據具體的歸檔要求，檔案室會進行全面地選擇和評價，歸檔處理一些有價值的文件檔案。利用多媒體技術，不僅讓工作的效率有了顯著地提高，還大大減少了工作人員的工作壓力。
在現在的大數據時代中多媒體技術可以更好地幫助存儲和有效地管理多種檔案，還能打印出來一些信息圖標，尤其是可以整理和存儲一些非常重要的資料，對檔案的原件可以進行嚴密地保護。另外還可以存儲和修補那些值得重視的歷史檔案，還能適當地修復和調整一些被損壞的信息，在對其進行剪輯和重新排列。
2.4更加方便、快捷地檢索檔案信息
全面地查找用戶的多媒體檔案信息是多媒體檔案檢索技術的主要內容，這種技術的優勢就是在廣泛應用的基礎上，在獲得相關信息時準確性有著較高的準確性，并且在檢索的過程中可以呈現出不同的方式，這樣就大大提升了檢索的質量和效率，同時還提升了檢索的智能化水平。在大數據的時代中以飛快的速度向前發展的兩大檢索就是超文本檢索和全文本檢索，同時它還是一種非常重要的信息資源開大的形式和手段。全文檢索顧名思義就是全文搜索和查詢文本，而不是查詢某一個目錄或者是文獻的數目，通過這種全文本的搜索，檢索和可以一次性的找到所需信息。檢索文本、章節、全文以及圖像聲像時超文本主檢索的主要內容，這種檢索方式的優點就是更具有靈活性，而且檢索的結果也具備靈活性，檢索行駛時多變的，根據檢索人的需求，可以適當地調整檢索形式，很大程度上改變了傳統的檢索方式。
2.5檔案信息服務多媒體化
在檔案管理中多媒體計算機主要應用在以下三方面：第一，對檔案室的情況介紹，室藏指南等軟件進行編制，并且要把檔案室的建筑、人員、機構等各種信息通過像、聲、文、圖的生動想害死演示出來。使得人機之間對話的靈活性、敏捷性各加突顯。第二，對檔案室的圖形、文字、錄像、錄音等各種檔案信息進行自動檢索和存貯，在保存時間上光盤信息存貯介質戰友很大的優勢，遠遠超過了磁盤、磁帶等介質，對檔案信息的長久保存起到了促進作用。第三，加快了檔案機讀取數據時的累積速度；有機得聯系文書工作和檔案工作的自動化，可以有助于工作流程和設備的合理分布；另外通過把有效的檔案信息資源建立在Internet上，可以使圖書情報資料和檔案信息的聯網交流得以實現?？傊?，在大數據時代的背景中，在檔案信息化的建設中多媒體技術起到了紐帶和橋梁的作用，通過建立一個多媒體化的檔案信息管理系統，各種媒體可以被有機地綜合起來，進而檔案信息的表示方法就可以得到改善。
在醫院檔案信息的管理應用中，有了多媒體技術的加入，可以拓寬閱者對檔案信息的需求，同時也會更加高標準地要求檔案工作人員的自身素質。在傳統的檔案信息管理中，檔案室是文件文字唯一的傳輸者，閱者要想同時得到聲音、動態圖像、檔案文件材料的文字等檔案信息，可以利用多媒體化的檔案信息服務，這樣檔案工作者就可以舍棄傳統簡單的借還工作。另外在大數據的時代背景中，這種對媒體化的檔案信息服務還可以達到真正跨越國界、空間、時間的資源共享。
大數據時代的應用范文5
關鍵詞：Nutch；HBase；大數據
中圖分類號：TP393.09；TP333
搜索引擎能根據一定的算法或者規則，運用計算機程序從互聯網上抓取信息，并在組織、處理和索引信息之后，為用戶提供檢索類服務。Nutch2.x版本通過使用Apache Gora處理對象的持久映射，使得存儲從特定的底層數據存儲分離出來。這意味著我們可以實現Nutch與眾多NoSQL存儲解決方案相集成。HBase，一種面向列的分布式存儲系統，具有高可靠性、高性能、可伸縮的優點，利用HBase可在廉價PC上搭建起大規模集群。在致力于起源于開源項目Nutch的大數據處理方面，二者結合所帶來的優勢不言而喻。
1 需求分析
隨著多元化新興媒體形態不斷出現，互聯網上的數據每年將增長50%，并且目前世界上90%以上的數據是最近幾年才產生的。搜索引擎作為連接受眾和互聯網海量信息的窗口，發揮著重要作用。而傳統通用搜索引擎難以滿足企業或者個人的定制化需要，難以準確判別用戶感興趣的信息并提供相應的搜索服務，為解決這些問題，Nutch應運而生。
反觀儲存層面，當代典型的關系型數據庫在大數據的應用中越來越乏力，例如為巨量文檔建立索引、高流量網站的網頁服務，以及發送流式媒體等方面。而以HBase為代表的NoSQL能實現數據高并發讀寫，海量數據存儲和訪問，高擴展性，這些優點使得它在處理Nutch抓取到的海量數據時游刃有余。
2 系統體系結構設計
2.1 系統框架
圖1 系統框架結構圖
如圖1所示，Nutch網絡爬蟲不斷搜索Internet來搜尋新網頁，或者更新過的網頁，網頁獨立的存儲在HBase中，等待索引。通過MapReduce對抓取到的網頁進行索引，以提高用戶搜索的方便性和準確性。最后用戶通過搜索程序入口提交目標關鍵詞，通過索引在HBase中找到相關記錄，并返回給用戶。
2.2 Nutch工作過程
圖2 Nutch工作過程
（1）Injector注入目標URL列表。從用戶指定的urlDir目錄下，獲取URL列表內容，并進行格式化、過濾，消除其中的不合法地址，設定抓取狀態（fetched和unfetched）和初始分值；將URL及其狀態、分值存人CrawlDB數據庫，或更新已有內容成最新的；（2）Generator產生成抓取列表。從CrawlDB數據庫中將地址取出，按一定規則進行過濾和排序；最后將生成的列表寫入segments中；（3）Fetcher抓取網頁。對segments下的抓取列表順序抓取。在抓取過程中，頁面的地址可能會發生跳轉，需要重定向。該過程采用多線程方式，獲得頁面源文件后同時進行下一步操作，即解析內容；（4）解析網頁內容。解析segments目錄中由Fetcher抓取到的頁面，將頁面分解到parse_date和parse_text目錄下。其中，parse_date中保存頁面的標題、輸入輸出鏈接等內容；parse_text中保存頁面的文本內容；（5）更新CrawlDB及反轉鏈接。根據segments目錄下的crawl_fetch和crawl_parse來更新CrawlDB，增添新的待抓取URL地址。Invert Links統計外部頁面對本頁面鏈接，并更新LinkDB，為建立索引的工作提供準備；（6）Indexer建立索引及索引去重。該過程生成Lucene索引，將本地數據轉換成文本，并進行分析，并將已分析的文本保存到數據庫中。
3 系統部署及實現
3.1 Nutch及HBase安裝部署
（1）Nutch 在Eclipse下的配置過程。使用svn從nutch官方網站直接檢出項目到本地后，配置項目路徑，刪除項目文件夾下src文件夾，隨后添加部分的java和test文件夾。由于Nutch在版本1.2之后，使用ivy來進行依賴管理。因此要添加IvyDE依賴庫，使用ivy下ivy.xml作為依賴庫，最后進行ant；（2）Ubuntu終端下直接配置HBase。在終端下，使用wget工具下載zookeeper，并編輯zoo.cfg文件。為防止在負載壓力過大，linux默認文件句柄數過低會造成異常，還需要修改nproc值。最后編輯hbase-env.sh、hbase-site.xml、regionservers，添加或修改相關屬性值；（3）Nutch文件自動儲存到HBase。由于Nutch2.x自身在設計過程中，已經利用Gora將底層數據存儲抽象出來，因此只需要在gora.properties中添加了gora.datastore.default屬性，并對nutch-site.xml、ivy.xml進行簡單修改即可。
3.2 Nutch與HBase結合在大數據方面的潛在價值
毫無疑問，大數據是一座金礦。Nutch搜索引擎結合HBase，可以充當在這座金礦中，進行數據挖掘以獲取有價值信息的淘金工具。下面舉幾個例子進行詳細說明。
政府部門大都擁有海量數據，如交通管理部門有路段監控、車站監控等數據，衛生等有關部門擁有流感數據等數據，公安部門有大量的身份信息數據等數據。如果這些數據與Nutch的搜索日志記錄以及存儲在HBase中的全網數據結合，則可以輕松科學地實現路線智能規劃提醒、流感疾病預測、嫌疑人信息鎖定等等功能。
大型企業如金融、通信等行業也擁有海量數據。但同樣沒有大數據處理能力，面對海量數據也不能為企業創造更大價值。如果能夠應用HBase，則可以對海量數據進行低成本且的存儲，再結合Nutch進行由淺入深的信息挖掘。
4 結束語
隨著大數據越來越深刻的體現在互聯網的方方面面，搜索引擎需要解決的問題，也變成找到最佳結果而不是大量結果，個性化需求凸顯。數據庫更加強調大規模的數據存儲能力以及高并發訪問。相信提供高質量的搜索結果等強大功能的Nutch，結合擁有著極好的且廉價的可擴展性，優秀海量數據存儲能力的HBase，會被越來越多的企業和個人認可。
參考文獻：
[1]王學松.Lucene+Nutch搜索引擎開發[M].北京：人民郵電出版社，2008.
[2]郭匡宇.基于MongoDB的傳感器數據分布式存儲的研究與應用[D].碩士學位論文，2013：10-24.
[3]維克托?邁爾-舍爾維恩，肯尼斯?庫克耶.大數據時代[M].杭州：浙江人民出版社，2013.
[4]嚴春來.基于Nutch的個性化搜索引擎的研究與探討[J].軟件開發與設計，2014（04）：4-5.
[5]詹恒飛，楊岳湘，方宏.Nutch分布式網絡爬蟲研究與優化[J].計算機科學與探索，2011（01）：70-71.
大數據時代的應用范文6
>> 大數據在教育中的應用 大數據在教學中的應用 教育大數據在教育管理中的運用分析 大數據時代下慕課對高校教學發展的影響 大數據技術及其在教育領域的應用 簡析大數據及其在教育領域的應用 大數據在教育領域應用的前景分析 大數據在教育培訓業的應用 慕課時代留學生教育理念的轉變 大數據在教育中的“進與退” 大數據時代下數據挖掘技術的應用 數據挖掘在大數據時代下的應用 大數據時代下數據挖掘在銀行中的應用 大數據時代下數據挖掘技術在企業中的應用 大數據時代下數據挖掘技術在銀行中的應用 論慕課時代教與學中的人文關懷 淺析后IT時代下“慕課”在初中美術教育中的應用 數據挖掘在教育中的應用 大數據時代下的電子商務教育模式 大數據時代下的汽車防撞智能的應用 常見問題解答 當前所在位置：）：這是愛課程網絡以及網易云課堂一起合創立的，其中北京大學、浙江大學、復旦大學等我國的高校目前已經有超過16所學校加入其中，其中在線的課程一共大約是75門，包括70萬多的用戶都在使用。
1.2 “慕課”所在優勢
“慕課”作為一種新型的教育理念與教育模式，已經在全球范圍內開始實行，根據有關學校使用后的感受反應，這種資源共享型的學習方式是符合現當今社會的理念，而且已經在各國的高等學府都開始這種新型的教育模式?！澳秸n”是在線進行學習，這給沒有上大學的人來說是一個千載難逢的機會，他們可以利用在家或者其他場所內進行在線學習，學習有關職業技能?！澳秸n”為在校的大學生又提供了另外的的一種學習模式與學習理念，與此同時也是商業思想的源泉所在?！澳秸n”平臺最大的特點就是有一部分的在線資源是共享型的，不用支付任何的費用就可以免費使用，這也是給大學生最大化的福利，使得學習不再是一件高投資的事情。“慕課”平臺的資源數量是巨大的，能夠為教學帶來實際性質的幫助，老師可以在其中找到任何需要的教學資源。
2 “小微課”時代
2.1 平臺簡介
“小微課”是在2013年被提出來的，主要就是針對在校大學生所開設的平臺，“小微課”平臺也被稱之為是后“慕課”時代，它主要就是更加細致、準確、具有代表性、能夠針對大學生的具體特點進行安排、多元化體現的最為明顯?！靶∥⒄n”主要形式有以下幾種：
（1）哈佛大學在2013年開設“小微課”，相關的學者都認為這是一次不小的教學改革。
（2）我國的清華大學、北京科技大學等也都使用了“小微課”，包容性、可持續性是其最大的特點。
（3）美國的加州大學在2013年秋使用了“小微課”，大部分的使用者都是對此表示贊同與支持。
2.2 “小微課”所在優勢
“小微課”問世短短的兩到三年的時間內做出了不少的成績，使使用過的大學生對此都非常的喜愛?！靶∥⒄n”對于大學生學習的數量具有限制，這樣使得老師在管理起來就會方便很多?！靶∥⒄n”有一個可以提前預選的階段，在預選的階段大學生能夠清楚課程的性質，能夠了解自己是否具備學習此門課程的能力，因此對于后期的淘汰率來說會大大的降低，起到了前期的輔助作用。平臺上的在線內容幾乎是針對各種專業、各種類型的學生而設定的，體現了區別對待的理念。又一個新的突破是將在線學習與老師課上講授結合在一起，使得學生能夠從各方面的角度進行學習。在線學習與老師課上講授結合在一起的同時，增加了老師與學生互動的模式，學生不會可以及時的向老師進行提問。傳統的教育教學是在課堂上進行講授，而“小微課”則是隨時隨地都可以進行學習，打破了傳統的授課學習固有的模式。
3 大數據的應用
大數據自從問世以來，一直被社會當中的各行各業、各個領域所使用著，它給社會帶來的好處不是能夠語言所表達的。它是一個社會的熱詞，定義是寬泛的，因此沒有具體的定義。就大學英語來說，大數據的特點顯現如下：
在學習的過程中可以容許大量的學生與老師，能夠系統性、全面性的展示學科中的知識，所教的內容比“小微課”中的還要細致、具體，對于大數據里面的題型來說，它們都是自動歸類，將與之有關系的學科知識點進行統一劃分，對于學生的考察評價機制也是具有針對性的，因人而異，學生自身也可以進行設置，在進行數據的需要時，少去了前期的篩選工作，可以直接在大數據中找到自己需要的信息，節約了大量的篩選時間，在進行數據提取的時候，一次就能夠解決問題，不需要進行第二次的提取。
4 結束語
隨著“慕課”以及“小微課”的逐漸問世，為大數據時代的到來打下了基礎，它們都是在各自的平臺上為需求者提供著大量的知識信息，就大學英語來說，其中的知識與結構不是老師都能夠講解到的，利用“小微課”“慕課”在大數據當中的應用，更好的開展教學，充分的利用現有的平臺進行知識的掌握與學習，使其真正的發揮自身的價值。
參考文獻
[1]張世蓉，楊永林，丁韜，張虹，王娜.從“慕課”到“小微課”，看大數據在教學中的應用[J].現代教育技術，2014（12）.
[2]范崇源.慕課發展中的挑戰與對策[J].信息技術與信息化，2014（09）.
[3]胡麗英.新媒體視角下的“慕課”發展與評判分析[J].信息與電腦，2015（14）.
[4]薛麗偉.對高等教育在慕課“熱潮”下的“本土化”思考[J].科學導報，2014（15）.
作者簡介
封伯燕（1981-），女，廣東省肇慶市人，大學本科學歷，講師職稱。研究方向為計算機科學與技術。
