大數(shù)據(jù)主要學(xué)習(xí)哪些內(nèi)容?
這是一個非常好的問題。作為一個IT從業(yè)者,一個教育工作者,我來回答一下。
大數(shù)據(jù)經(jīng)過多年的發(fā)展,已經(jīng)逐漸形成了比較龐大系統(tǒng)的知識體系,整體技術(shù)成熟度已經(jīng)比較高,所以學(xué)習(xí)大數(shù)據(jù)技術(shù)也會有比較好的學(xué)習(xí)體驗。
因為大數(shù)據(jù)涉及的內(nèi)容非常多,而且大數(shù)據(jù)技術(shù)也與行業(yè)息息相關(guān),所以在學(xué)習(xí)大數(shù)據(jù)的時候,可以從技術(shù)的角度,也可以基于行業(yè)來學(xué)習(xí)大數(shù)據(jù)。對于學(xué)生來說,可以從大數(shù)據(jù)技術(shù)體系中學(xué)習(xí),對于職場人來說,可以結(jié)合自己的行業(yè)和工作任務(wù)學(xué)習(xí)大數(shù)據(jù)。
無論是學(xué)生還是職場人士,想要學(xué)習(xí)大數(shù)據(jù),需要掌握以下基本內(nèi)容:
第一:計算機基礎(chǔ)知識。學(xué)習(xí)大數(shù)據(jù)技術(shù),計算機基礎(chǔ)知識非常重要,其中操作系統(tǒng)、編程語言、數(shù)據(jù)庫等知識是必須要學(xué)的。編程語言可以向Python學(xué)習(xí),如果以后想從事專業(yè)的大數(shù)據(jù)開發(fā),也可以向Java學(xué)習(xí)。計算機基礎(chǔ)知識學(xué)習(xí)起來比較難,要注意實驗在學(xué)習(xí)過程中的作用。
第二:數(shù)學(xué)統(tǒng)計基礎(chǔ)知識。大數(shù)據(jù)技術(shù)體系的核心目的是"數(shù)據(jù)價值",而數(shù)據(jù)價值產(chǎn)生的過程必然離不開數(shù)據(jù)分析,所以作為數(shù)據(jù)分析基礎(chǔ)的數(shù)學(xué)和統(tǒng)計學(xué)知識更為重要。數(shù)學(xué)和統(tǒng)計學(xué)的基礎(chǔ)對大數(shù)據(jù)從業(yè)者未來的成長空間有著重要的影響,所以一定要重視這兩方面知識的學(xué)習(xí)。
第三:大數(shù)據(jù)平臺的基礎(chǔ)。大數(shù)據(jù)開發(fā)和大數(shù)據(jù)分析離不開大數(shù)據(jù)平臺的支撐,大數(shù)據(jù)平臺涉及分布式存儲、分布式計算等基礎(chǔ)功能。掌握大數(shù)據(jù)平臺,也會形成對大數(shù)據(jù)技術(shù)體系的深刻理解。對于新手來說,可以從Hadoop和Spark入手。
本人從事互聯(lián)網(wǎng)行業(yè)多年,目前在讀計算機專業(yè)研究生。我的主要研究方向是大數(shù)據(jù)和人工智能。我會陸續(xù)寫一些互聯(lián)網(wǎng)技術(shù)方面的文章,有興趣的朋友可以關(guān)注我。我相信我一定會有所收獲。
如果你有關(guān)于互聯(lián)網(wǎng),大數(shù)據(jù),人工智能,或者考研的問題,可以在評論區(qū)留言或者私信我!
docker容器啟動失敗,求助?
步驟1:為我們的容器創(chuàng)建第一個鏡像。
#基于centos映像,我們啟動自己的容器并在其中執(zhí)行/bin/bash命令。
#注意:-t-i參數(shù)用于創(chuàng)建虛擬命令行。
sudodockerrun-t-Icentos/bin/bash
現(xiàn)在我們已經(jīng)成功運行了我們的第一個容器,并進(jìn)入了容器的命令行界面。中等。在容器中,我們執(zhí)行以下命令:
Yum-y更新#更新包
Yuminstallwhich#安裝哪個命令。
Yum安裝Git#安裝Git
安裝完成后,按Ctrld退出容器的命令行。
#執(zhí)行sudodockerps-a,可以看到容器被我們終止。
容器ID圖像命令已創(chuàng)建……
da9031d3568fcentos:6.4/bin/bash5分鐘前…..
將我們的更改提交到新容器:
#這里我們創(chuàng)建一個自己的基本容器,里面安裝了文章中需要的常用工具。讀者的容器id可能與文章中的不同,以上一步dockerps-a的結(jié)果為準(zhǔn)。
sudodocker提交da90自定義/基本
容器成功提交后,執(zhí)行sudodockerimages,我們將看到剛剛提交的容器(如下面的結(jié)果所示)。讓讓我們把這個容器作為基本容器,然后創(chuàng)建一個新的容器。
存儲庫標(biāo)記圖像ID已創(chuàng)建
2分鐘前定制/基礎(chǔ)最新05b6cecd370b
10個月前centos6.4539c0211cd76
centos最新539c0211cd7610個月前…
步驟2:創(chuàng)建一個新的容器并安裝apache。
#運行基于自定義/基本容器的新容器。
sudodockerrun-t-Icustom/base/bin/bash
#安裝httpd
yum安裝httpd
第3步:再次提交新容器。
按Ctrld退出容器的命令行,然后執(zhí)行命令:
#該命令將把在步驟2中安裝httpd所引起的更改提交到名為custom/httpd的新容器映像中。您的容器id可能與文章中的不同,這取決于sudodockerps-a命令的結(jié)果。
sudodocker提交aa6e2fc0b94c自定義/httpd
您應(yīng)該已經(jīng)注意到,我們已經(jīng)用http服務(wù)器創(chuàng)建了一個可重用的容器映像。你可以按照這個思路去做你需要做的事情。為的每個組件創(chuàng)建一個容器,然后在開發(fā)環(huán)境或生產(chǎn)環(huán)境中重用這些容器。
步驟7:運行http服務(wù)器。
#-v會將卷從虛擬機裝載到容器,該容器也從主機共享到漫游虛擬機。
#-v參數(shù)將主機與虛擬機共享的卷裝載到容器中。
#-p將虛擬機端口80轉(zhuǎn)發(fā)到容器端口80虛擬機端口80映射到浮動文件中的主機端口8080
#-p參數(shù)將虛擬機的80端口映射到容器的80端口;虛擬機的端口80綁定到Vagrantfile中主機的端口8080,即主機8080-gt虛擬機80-gt容器80。