大家好,今天小編關(guān)注到一個(gè)比較有意思的話題,就是關(guān)于科技大數(shù)據(jù)應(yīng)用發(fā)展階段的問題,于是小編就整理了3個(gè)相關(guān)介紹科技大數(shù)據(jù)應(yīng)用發(fā)展階段的解答,讓我們一起看看吧。
在計(jì)算機(jī)硬件、軟件發(fā)展的基礎(chǔ)上數(shù)據(jù)管理技術(shù)經(jīng)歷了人工管理、文件系統(tǒng)、數(shù)據(jù)庫系統(tǒng)3個(gè)階段。
1、人工管理階段:在20世紀(jì)50年代中期以前,計(jì)算機(jī)主要用于數(shù)值計(jì)算,只能使用卡片、紙帶、磁帶等存儲(chǔ)數(shù)據(jù)。數(shù)據(jù)的輸入、輸出和使用應(yīng)隨程序一起調(diào)入內(nèi)存,用完撤出。造成數(shù)據(jù)冗余度大!而且,數(shù)據(jù)的存儲(chǔ)格式、存取方式、輸入輸出方式都要由程序員自行設(shè)計(jì)!
2、文件系統(tǒng)階段:20世紀(jì)60年代中期,大量大容量的存儲(chǔ)設(shè)備出現(xiàn),使數(shù)據(jù)不再是程序的組成部分,它可以直接存儲(chǔ)在外存儲(chǔ)器上,通過文件名來調(diào)入使用。但是除了對(duì)數(shù)據(jù)的存取由文件系統(tǒng)來完成以外,數(shù)據(jù)的內(nèi)部結(jié)構(gòu)、數(shù)據(jù)的維護(hù)卻仍由程序來定義和完成!因而,數(shù)據(jù)文件與使用數(shù)據(jù)的程序之間仍存在很強(qiáng)的依賴關(guān)系。
3、數(shù)據(jù)庫系統(tǒng)階段:20世紀(jì)60年代后期,大容量磁盤的使用和數(shù)據(jù)處理的急劇增長(zhǎng),使聯(lián)機(jī)存儲(chǔ)大量數(shù)據(jù)成為可能,為了解決數(shù)據(jù)的獨(dú)立性問題,實(shí)現(xiàn)數(shù)據(jù)的統(tǒng)一管理,達(dá)到數(shù)據(jù)共享的目的,數(shù)據(jù)庫得到了極大的發(fā)展,進(jìn)入數(shù)據(jù)庫系統(tǒng)階段。 數(shù)據(jù)管理技術(shù)是指對(duì)數(shù)據(jù)進(jìn)行分類、編碼、存儲(chǔ)、檢索和維護(hù),它是數(shù)據(jù)處理的中心問題。隨著計(jì)算機(jī)技術(shù)的不斷發(fā)展。
1. 單機(jī)時(shí)代:計(jì)算機(jī)網(wǎng)絡(luò)的前身是單機(jī)時(shí)代的“孤島”,以計(jì)算機(jī)為基礎(chǔ),實(shí)現(xiàn)數(shù)據(jù)的輸入、處理、輸出等功能。這個(gè)階段的網(wǎng)絡(luò)局限于某個(gè)計(jì)算機(jī)系統(tǒng)內(nèi)的數(shù)據(jù)傳輸,主要應(yīng)用于科學(xué)研究、工程設(shè)計(jì)和軍事領(lǐng)域。數(shù)據(jù)傳輸?shù)闹饕绞绞屈c(diǎn)對(duì)點(diǎn)方式。
2. 局域網(wǎng)時(shí)代:隨著計(jì)算機(jī)技術(shù)的發(fā)展和普及,為解決單機(jī)時(shí)代的數(shù)據(jù)共享問題,局域網(wǎng)(Local Area Network,LAN)應(yīng)運(yùn)而生。局域網(wǎng)是指在有限范圍內(nèi)的互聯(lián)網(wǎng),如企業(yè)、校園、小區(qū)等。局域網(wǎng)采用了分組交換、廣播、多路訪問等技術(shù),實(shí)現(xiàn)局域范圍內(nèi)的數(shù)據(jù)共享。
3. 廣域網(wǎng)時(shí)代:隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展,廣域網(wǎng)(Wide Area Network,WAN)開始發(fā)展。廣域網(wǎng)是指覆蓋幾個(gè)城市、一個(gè)國(guó)家、甚至世界各地的計(jì)算機(jī)網(wǎng)絡(luò)。廣域網(wǎng)主要采用了路由器、交換機(jī)、通信協(xié)議等技術(shù),實(shí)現(xiàn)在全球范圍內(nèi)的數(shù)據(jù)傳輸。
4. 互聯(lián)網(wǎng)時(shí)代:互聯(lián)網(wǎng)(Internet)是一種全球性的、開放性的計(jì)算機(jī)網(wǎng)絡(luò)。它是由眾多局域網(wǎng)和廣域網(wǎng)互相連接而成,實(shí)現(xiàn)了全球范圍內(nèi)的數(shù)據(jù)通信和信息共享?;ヂ?lián)網(wǎng)采用了分層結(jié)構(gòu)、TCP/IP協(xié)議、域名系統(tǒng)等技術(shù),成為了現(xiàn)代社會(huì)不可或缺的基礎(chǔ)設(shè)施。
大數(shù)據(jù)課程:基礎(chǔ)階段:Linux、Docker、KVM、MySQL基礎(chǔ)、Oracle基礎(chǔ)、MongoDB、redis。hadoop mapreduce hdfs yarn:hadoop:Hadoop 概念、版本、歷史,HDFS工作原理,YARN介紹及組件介紹。大數(shù)據(jù)存儲(chǔ)階段:hbase、hive、sqoop。大數(shù)據(jù)架構(gòu)設(shè)計(jì)階段:Flume分布式、Zookeeper、Kafka。大數(shù)據(jù)實(shí)時(shí)計(jì)算階段:Mahout、Spark、storm。大數(shù)據(jù)數(shù)據(jù)采集階段:Python、Scala。大數(shù)據(jù)商業(yè)實(shí)戰(zhàn)階段:實(shí)操企業(yè)大數(shù)據(jù)處理業(yè)務(wù)場(chǎng)景,分析需求、解決方案實(shí)施,綜合技術(shù)實(shí)戰(zhàn)應(yīng)用。
到此,以上就是小編對(duì)于科技大數(shù)據(jù)應(yīng)用發(fā)展階段的問題就介紹到這了,希望介紹關(guān)于科技大數(shù)據(jù)應(yīng)用發(fā)展階段的3點(diǎn)解答對(duì)大家有用。