大數(shù)據(jù)、云計(jì)算、人工智能

今天跟大家講講云計(jì)算、大數(shù)據(jù)和人工智能。為什么講這三個(gè)東西呢？因?yàn)檫@三個(gè)東西現(xiàn)在非?；?，并且它們之間好像互相有關(guān)系：一般談云計(jì)算的時(shí)候會(huì)提到大數(shù)據(jù)、談人工智能的時(shí)候會(huì)提大數(shù)據(jù)、談人工智能的時(shí)候會(huì)提云計(jì)算……感覺(jué)三者之間相輔相成又不可分割。但如果是非技術(shù)的人員，就可能比較難理解這三者之間的相互關(guān)系，所以有必要解釋一下。

一、云計(jì)算
我們首先來(lái)說(shuō)云計(jì)算。云計(jì)算最初的目標(biāo)是對(duì)資源的管理，管理的主要是計(jì)算資源、網(wǎng)絡(luò)資源、存儲(chǔ)資源三個(gè)方面。

1.管理數(shù)據(jù)中心就像配電腦

什么叫計(jì)算、網(wǎng)絡(luò)、存儲(chǔ)資源？

比如你要買臺(tái)筆記本電腦，是不是要關(guān)心這臺(tái)電腦是什么樣的CPU？多大的內(nèi)存？這兩個(gè)就被我們稱為計(jì)算資源。

這臺(tái)電腦要上網(wǎng)，就需要有個(gè)可以插網(wǎng)線的網(wǎng)口，或者有可以連接我們家路由器的無(wú)線網(wǎng)卡。您家也需要到運(yùn)營(yíng)商比如聯(lián)通、移動(dòng)或者電信開(kāi)通一個(gè)網(wǎng)絡(luò)，比如100M的帶寬。然后會(huì)有師傅弄一根網(wǎng)線到您家來(lái)，師傅可能會(huì)幫您將您的路由器和他們公司的網(wǎng)絡(luò)連接配置好。這樣您家的所有的電腦、手機(jī)、平板就都可以通過(guò)您的路由器上網(wǎng)了。這就是網(wǎng)絡(luò)資源。

您可能還會(huì)問(wèn)硬盤多大？過(guò)去的硬盤都很小，大小如10G之類的；后來(lái)即使500G、1T、2T的硬盤也不新鮮了。(1T是1000G)，這就是存儲(chǔ)資源。

對(duì)于一臺(tái)電腦是這個(gè)樣子的，對(duì)于一個(gè)數(shù)據(jù)中心也是同樣的。想象你有一個(gè)非常非常大的機(jī)房，里面堆了很多的服務(wù)器，這些服務(wù)器也是有CPU、內(nèi)存、硬盤的，也是通過(guò)類似路由器的設(shè)備上網(wǎng)的。這時(shí)的問(wèn)題就是：運(yùn)營(yíng)數(shù)據(jù)中心的人是怎么把這些設(shè)備統(tǒng)一的管理起來(lái)的呢？

2.靈活就是想啥時(shí)要都有，想要多少都行

管理的目標(biāo)就是要達(dá)到兩個(gè)方面的靈活性。具體哪兩個(gè)方面呢？

時(shí)間靈活性：想什么時(shí)候要就什么時(shí)候要，需要的時(shí)候一點(diǎn)就出來(lái)了；

空間靈活性：想要多少就有多少。需要一個(gè)太很小的電腦，可以滿足；需要一個(gè)特別大的空間例如云盤，云盤給每個(gè)人分配的空間動(dòng)不動(dòng)就很大很大，隨時(shí)上傳隨時(shí)有空間，永遠(yuǎn)用不完，也是可以滿足的。

小編是一個(gè)python開(kāi)發(fā)工程師，我這里有一套最新的python基礎(chǔ)學(xué)習(xí)教程，想學(xué)習(xí)python的小伙伴思信我“01”領(lǐng)取哦~

3.虛擬化的半自動(dòng)和云計(jì)算的全自動(dòng)

要說(shuō)虛擬化軟件解決了靈活性問(wèn)題，其實(shí)并不全對(duì)。因?yàn)樘摂M化軟件一般創(chuàng)建一臺(tái)虛擬的電腦，是需要人工指定這臺(tái)虛擬電腦放在哪臺(tái)物理機(jī)上的。這一過(guò)程可能還需要比較復(fù)雜的人工配置。所以使用VMware的虛擬化軟件，需要考一個(gè)很牛的證書，而能拿到這個(gè)證書的人，薪資是相當(dāng)高，也可見(jiàn)復(fù)雜程度。

所以僅僅憑虛擬化軟件所能管理的物理機(jī)的集群規(guī)模都不是特別大，一般在十幾臺(tái)、幾十臺(tái)、最多百臺(tái)這么一個(gè)規(guī)模。

這一方面會(huì)影響時(shí)間靈活性：雖然虛擬出一臺(tái)電腦的時(shí)間很短，但是隨著集群規(guī)模的擴(kuò)大，人工配置的過(guò)程越來(lái)越復(fù)雜，越來(lái)越耗時(shí)。另一方面也影響空間靈活性：當(dāng)用戶數(shù)量多時(shí)，這點(diǎn)集群規(guī)模，還遠(yuǎn)達(dá)不到想要多少要多少的程度，很可能這點(diǎn)資源很快就用完了，還得去采購(gòu)。

所以隨著集群的規(guī)模越來(lái)越大，基本都是千臺(tái)起步，動(dòng)輒上萬(wàn)臺(tái)、甚至幾十上百萬(wàn)臺(tái)。如果去查一下BAT，包括網(wǎng)易、谷歌、亞馬遜，服務(wù)器數(shù)目都大的嚇人。這么多機(jī)器要靠人去選一個(gè)位置放這臺(tái)虛擬化的電腦并做相應(yīng)的配置，幾乎是不可能的事情，還是需要機(jī)器去做這個(gè)事情。

人們發(fā)明了各種各樣的算法來(lái)做這個(gè)事情，算法的名字叫做調(diào)度(Scheduler)。通俗一點(diǎn)說(shuō)，就是有一個(gè)調(diào)度中心，幾千臺(tái)機(jī)器都在一個(gè)池子里面，無(wú)論用戶需要多少CPU、內(nèi)存、硬盤的虛擬電腦，調(diào)度中心會(huì)自動(dòng)在大池子里面找一個(gè)能夠滿足用戶需求的地方，把虛擬電腦啟動(dòng)起來(lái)做好配置，用戶就直接能用了。這個(gè)階段我們稱為池化或者云化。到了這個(gè)階段，才可以稱為云計(jì)算，在這之前都只能叫虛擬化。

4.云計(jì)算的私有與公有

云計(jì)算大致分兩種：一個(gè)是私有云，一個(gè)是公有云，還有人把私有云和公有云連接起來(lái)稱為混合云，這里暫且不說(shuō)這個(gè)。

私有云：把虛擬化和云化的這套軟件部署在別人的數(shù)據(jù)中心里面。使用私有云的用戶往往很有錢，自己買地建機(jī)房、自己買服務(wù)器，然后讓云廠商部署在自己這里。VMware后來(lái)除了虛擬化，也推出了云計(jì)算的產(chǎn)品，并且在私有云市場(chǎng)賺的盆滿缽滿。

公有云：把虛擬化和云化軟件部署在云廠商自己數(shù)據(jù)中心里面的，用戶不需要很大的投入，只要注冊(cè)一個(gè)賬號(hào)，就能在一個(gè)網(wǎng)頁(yè)上點(diǎn)一下創(chuàng)建一臺(tái)虛擬電腦。例如AWS即亞馬遜的公有云；例如國(guó)內(nèi)的阿里云、騰訊云、網(wǎng)易云等。

二、大數(shù)據(jù)擁抱云計(jì)算

在PaaS層中一個(gè)復(fù)雜的通用應(yīng)用就是大數(shù)據(jù)平臺(tái)。大數(shù)據(jù)是如何一步一步融入云計(jì)算的呢？

1.數(shù)據(jù)不大也包含智慧

一開(kāi)始這個(gè)大數(shù)據(jù)并不大。原來(lái)才有多少數(shù)據(jù)？現(xiàn)在大家都去看電子書，上網(wǎng)看新聞了，在我們80后小時(shí)候，信息量沒(méi)有那么大，也就看看書、看看報(bào)，一個(gè)星期的報(bào)紙加起來(lái)才有多少字？如果你不在一個(gè)大城市，一個(gè)普通的學(xué)校的圖書館加起來(lái)也沒(méi)幾個(gè)書架，是后來(lái)隨著信息化的到來(lái)，信息才會(huì)越來(lái)越多。

首先我們來(lái)看一下大數(shù)據(jù)里面的數(shù)據(jù)，就分三種類型，一種叫結(jié)構(gòu)化的數(shù)據(jù)，一種叫非結(jié)構(gòu)化的數(shù)據(jù)，還有一種叫半結(jié)構(gòu)化的數(shù)據(jù)。

結(jié)構(gòu)化的數(shù)據(jù)：即有固定格式和有限長(zhǎng)度的數(shù)據(jù)。例如填的表格就是結(jié)構(gòu)化的數(shù)據(jù)，國(guó)籍：中華人民共和國(guó)，民族：漢，性別：男，這都叫結(jié)構(gòu)化數(shù)據(jù)。

非結(jié)構(gòu)化的數(shù)據(jù)：現(xiàn)在非結(jié)構(gòu)化的數(shù)據(jù)越來(lái)越多，就是不定長(zhǎng)、無(wú)固定格式的數(shù)據(jù)，例如網(wǎng)頁(yè)，有時(shí)候非常長(zhǎng)，有時(shí)候幾句話就沒(méi)了；例如語(yǔ)音，視頻都是非結(jié)構(gòu)化的數(shù)據(jù)。

半結(jié)構(gòu)化數(shù)據(jù)：是一些XML或者HTML的格式的，不從事技術(shù)的可能不了解，但也沒(méi)有關(guān)系。

其實(shí)數(shù)據(jù)本身不是有用的，必須要經(jīng)過(guò)一定的處理。例如你每天跑步帶個(gè)手環(huán)收集的也是數(shù)據(jù)，網(wǎng)上這么多網(wǎng)頁(yè)也是數(shù)據(jù)，我們稱為Data。數(shù)據(jù)本身沒(méi)有什么用處，但數(shù)據(jù)里面包含一個(gè)很重要的東西，叫做信息（Information）。

所以數(shù)據(jù)的應(yīng)用分這四個(gè)步驟：數(shù)據(jù)、信息、知識(shí)、智慧。

最終的階段是很多商家都想要的。你看我收集了這么多的數(shù)據(jù)，能不能基于這些數(shù)據(jù)來(lái)幫我做下一步的決策，改善我的產(chǎn)品。例如讓用戶看視頻的時(shí)候旁邊彈出廣告，正好是他想買的東西；再如讓用戶聽(tīng)音樂(lè)時(shí)，另外推薦一些他非常想聽(tīng)的其他音樂(lè)。

三、人工智能擁抱大數(shù)據(jù)

1.機(jī)器什么時(shí)候才能懂人心

雖說(shuō)有了大數(shù)據(jù)，人的欲望卻不能夠滿足。雖說(shuō)在大數(shù)據(jù)平臺(tái)里面有搜索引擎這個(gè)東西，想要什么東西一搜就出來(lái)了。但也存在這樣的情況：我想要的東西不會(huì)搜，表達(dá)不出來(lái)，搜索出來(lái)的又不是我想要的。

例如音樂(lè)軟件推薦了一首歌，這首歌我沒(méi)聽(tīng)過(guò)，當(dāng)然不知道名字，也沒(méi)法搜。但是軟件推薦給我，我的確喜歡，這就是搜索做不到的事情。當(dāng)人們使用這種應(yīng)用時(shí)，會(huì)發(fā)現(xiàn)機(jī)器知道我想要什么，而不是說(shuō)當(dāng)我想要時(shí)，去機(jī)器里面搜索。這個(gè)機(jī)器真像我的朋友一樣懂我，這就有點(diǎn)人工智能的意思了

人們很早就在想這個(gè)事情了。最早的時(shí)候，人們想象，要是有一堵墻，墻后面是個(gè)機(jī)器，我給它說(shuō)話，它就給我回應(yīng)。如果我感覺(jué)不出它那邊是人還是機(jī)器，那它就真的是一個(gè)人工智能的東西了。

2.讓機(jī)器學(xué)會(huì)推理

怎么才能做到這一點(diǎn)呢？人們就想：我首先要告訴計(jì)算機(jī)人類的推理的能力。你看人重要的是什么？人和動(dòng)物的區(qū)別在什么？就是能推理。要是把我這個(gè)推理的能力告訴機(jī)器，讓機(jī)器根據(jù)你的提問(wèn)，推理出相應(yīng)的回答，這樣多好？

其實(shí)目前人們慢慢地讓機(jī)器能夠做到一些推理了，例如證明數(shù)學(xué)公式。這是一個(gè)非常讓人驚喜的一個(gè)過(guò)程，機(jī)器竟然能夠證明數(shù)學(xué)公式。但慢慢又發(fā)現(xiàn)其實(shí)這個(gè)結(jié)果也沒(méi)有那么令人驚喜。因?yàn)榇蠹野l(fā)現(xiàn)了一個(gè)問(wèn)題：數(shù)學(xué)公式非常嚴(yán)謹(jǐn)，推理過(guò)程也非常嚴(yán)謹(jǐn)，而且數(shù)學(xué)公式很容易拿機(jī)器來(lái)進(jìn)行表達(dá)，程序也相對(duì)容易表達(dá)。

然而人類的語(yǔ)言就沒(méi)這么簡(jiǎn)單了。有些時(shí)候同一句話在不同場(chǎng)合表達(dá)的意思是不一樣的，這個(gè)時(shí)候就只有人能夠理解，機(jī)器是無(wú)法理解的。

3.教給機(jī)器知識(shí)

因此，僅僅告訴機(jī)器嚴(yán)格的推理是不夠的，還要告訴機(jī)器一些知識(shí)。但告訴機(jī)器知識(shí)這個(gè)事情，一般人可能就做不來(lái)了?？赡軐＜铱梢?，比如語(yǔ)言領(lǐng)域的專家或者財(cái)經(jīng)領(lǐng)域的專家。

語(yǔ)言領(lǐng)域和財(cái)經(jīng)領(lǐng)域知識(shí)能不能表示成像數(shù)學(xué)公式一樣稍微嚴(yán)格點(diǎn)呢？例如語(yǔ)言專家可能會(huì)總結(jié)出主謂賓定狀補(bǔ)這些語(yǔ)法規(guī)則，主語(yǔ)后面一定是謂語(yǔ)，謂語(yǔ)后面一定是賓語(yǔ)，將這些總結(jié)出來(lái)，并嚴(yán)格表達(dá)出來(lái)不就行了嗎？后來(lái)發(fā)現(xiàn)這個(gè)不行，太難總結(jié)了。

4.人工智能需要大數(shù)據(jù)

人工智能可以做的事情非常多，例如可以鑒別垃圾郵件、鑒別黃色暴力文字和圖片等。這也是經(jīng)歷了三個(gè)階段的：

第一個(gè)階段依賴于關(guān)鍵詞黑白名單和過(guò)濾技術(shù)，包含哪些詞就是黃色或者暴力的文字。隨著這個(gè)網(wǎng)絡(luò)語(yǔ)言越來(lái)越多，詞也不斷地變化，不斷地更新這個(gè)詞庫(kù)就有點(diǎn)顧不過(guò)來(lái)。

第二個(gè)階段時(shí)，基于一些新的算法，比如說(shuō)貝葉斯過(guò)濾等，你不用管貝葉斯算法是什么，但是這個(gè)名字你應(yīng)該聽(tīng)過(guò)，這個(gè)一個(gè)基于概率的算法。

第三個(gè)階段就是基于大數(shù)據(jù)和人工智能，進(jìn)行更加精準(zhǔn)的用戶畫像和文本理解和圖像理解。

由于人工智能算法多是依賴于大量的數(shù)據(jù)的，這些數(shù)據(jù)往往需要面向某個(gè)特定的領(lǐng)域(例如電商，郵箱)進(jìn)行長(zhǎng)期的積累，如果沒(méi)有數(shù)據(jù)，就算有人工智能算法也白搭，所以人工智能程序很少像前面的IaaS和PaaS一樣，將人工智能程序給某個(gè)客戶安裝一套，讓客戶去用。因?yàn)榻o某個(gè)客戶單獨(dú)安裝一套，客戶沒(méi)有相關(guān)的數(shù)據(jù)做訓(xùn)練，結(jié)果往往是很差的。

但云計(jì)算廠商往往是積累了大量數(shù)據(jù)的，于是就在云計(jì)算廠商里面安裝一套，暴露一個(gè)服務(wù)接口，比如您想鑒別一個(gè)文本是不是涉及黃色和暴力，直接用這個(gè)在線服務(wù)就可以了。這種形勢(shì)的服務(wù)，在云計(jì)算里面稱為軟件即服務(wù)，saas (Software AS A Service)

于是工智能程序作為saas平臺(tái)進(jìn)入了云計(jì)算。

四、基于三者關(guān)系的美好生活

終于云計(jì)算的三兄弟湊齊了，分別是IaaS、PaaS和saas。所以一般在一個(gè)云計(jì)算平臺(tái)上，云、大數(shù)據(jù)、人工智能都能找得到。一個(gè)大數(shù)據(jù)公司，積累了大量的數(shù)據(jù)，會(huì)使用一些人工智能的算法提供一些服務(wù)；一個(gè)人工智能公司，也不可能沒(méi)有大數(shù)據(jù)平臺(tái)支撐。

所以，當(dāng)云計(jì)算、大數(shù)據(jù)、人工智能這樣整合起來(lái)，便完成了相遇、相識(shí)、相知的過(guò)程。

新聞名稱：大數(shù)據(jù)、云計(jì)算、人工智能
本文來(lái)源：http://www.bm7419.com/news13/104213.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站制作、移動(dòng)網(wǎng)站建設(shè)、網(wǎng)站營(yíng)銷、定制網(wǎng)站、Google、網(wǎng)站收錄

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)