什么是大數據技術？

什么是大數據武藝？

大數據武藝的目標就是為了應對業務情況(生存或消費)中第一時間產生的多量或海量數據，約莫是一天幾個億乃至幾十億的數據，要對這些數據舉行布局化處理，既能大吞吐量的寫入存儲，還能快速的查詢到存儲的布局，既要均衡的分布這些數據，還能對顯現問妨礙的節點，快速舉行規復，既能確保體系在分布式情況下具有精良的可用性，在某些情況下還要確保數據的一律性(接近)，既要能快速的調用業務端正，完成數據驅動下的及時處理，還能對成百上千臺存儲了N多個PT數據集的并行分析，提供算力最大化的數據處理架構。

那大數據開發呢，實踐上分兩種：第一類是編寫一些Hadoop、Spark的使用步驟，第二類是對大數據處理體系本身舉行開發。第二類事情的話通常才大公司里才有，尋常他們都市搞本人的體系大概再對開源的做些二次開發。這種事情的話對實際和實踐要求的都更深一些，也更有武藝含量。接下去來開頭拆分大數據開發，這些都是基本要把握的內容

• 01 Python基本：語法· Python數據處理· 函數· 文件讀寫· 特別處理· 模塊和包
• 02 Python進階：面向目標· 網絡編程· 多職責編程· 高等語法· Python編程綜合項目
• 03 SQL基本： MySQL與SQL· Kettle與BI東西· Pymysql
• 04 ETL基本： ETL看法與東西· Python ETL實戰· BI
• 05 Hadoop武藝棧 :Linux· 大數據基本和硬件先容· Zookeeper· HDFS· MapReduce· YARN· Hive基本· Hive高階
• 06 Spark武藝棧 : Pandas基本· Pandas數據處理實戰· Spark基本· Spark Core· Spark SQL· SparkSQL案例· Kafka· Elasticsearch
• 07 Flink武藝棧 : Flink Core· Flink DataStream· Flink SQL· Flink Runtime· Flink高等· Flink電商案例實戰

學習資源：2022年黑馬python大數據開發學習路途

一、網站

1. 網易公開課
https://http://open.163.com/

2. 騰訊講堂 https://http://ke.qq.com/

3. 中國大學慕課
https://www.http://icourse163.org/

4. B站
https://www.http://bilibili.com/

學習資源十分多，內容體系且全盤，重點眷注一些專業培訓機構上傳的學習視頻

5. Statista https://www.http://statista.com/

6. CEIC https://www.http://ceicdata.com/en

7. InfoQ-大數據
https://www.http://infoq.cn/

二、冊本

1. 《為數據而生》

這是一部大數據在伶俐都市、醫療、教導、金融、商業等范疇的實踐條記；更是一部為將來大數據的提高提供有可行性的途徑指南！

2. 《R言語猜測實戰》

R言語具有上手快、聽從高的特點，它超過金融、生物、醫學、互聯網等多個范疇，主要用于統計、建模及可視化。猜測是數據發掘的主要作用之一，也是大數據年代的中心代價地點。

3. 《Hadoop威望指南》

本書是Hadoop威望參考，步驟員可從中探究怎樣分析海量數據集，辦理員可以從中了解怎樣安裝與運轉Hadoop集群。