文章目錄 spark簡介1、什么是spark2、為什么要學習spark3、spark特點 spark生態參考 spark簡介 1、什么是spark 基于內存的計算引擎，它的計算速度非常快。但是僅僅只涉及到 數據的計算 \color{#70f3ff}{\boxed{\color{green}{\text{數據的計算}}}}

我們說hdfs,包含namenode和datanode和secondarynamenode hdfs和hadoop的關系、其中namenode是很重要,存了元數據,然后 secondarynamenode 相當于namenode的補充,當namenode掛了,secondarynamenode好補上去. 大數據平臺介紹，看看HDFS的介紹

然后來看一下HDFS  的產生背景,其實就是一臺服務器,存不下,需要放到多個服務器,那么 當前的大數據背景是什么，讀取的時候怎么讀取? 需要一個文件管理系統,來管理多個服務器上存儲的這些文件. 關于大數據背景，HDFS只是一種文件管理系統,我們windows用的NTSF文件管理系統

Hadoop历史雏形开始于2002年的Apache的Nutch，Nutch是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。hadoop环境。随后在2003年Google发表了一篇技术学术论文谷歌文件系统（GFS）。GFS也就是google