暑假学习记录（四）

刺骨的言语ヽ痛彻心扉 2023-06-03 04:55 2阅读 0赞

该星期主要学习了一些Hadoop的理论知识，以及为什么要使用Hadoop，在代码方面呢主要学习了一些matlab的基本知识，因为马上就要开始数学建模国赛的集训了。

<table> 
 <tbody> 
 <tr> 
 <td> &nbsp; </td> 
 <td> 第四周 </td> 
 </tr> 
 <tr> 
 <td> 所花时间（包括上课） </td> 
 <td> 5h </td> 
 </tr> 
 <tr> 
 <td> 代码量（行） </td> 
 <td> 200（MATLAB） </td> 
 </tr> 
 <tr> 
 <td> 博客量（篇） </td> 
 <td> 1 </td> 
 </tr> 
 <tr> 
 <td> 了解到的知识点 </td> 
 <td> 1.&nbsp; 大数据不仅仅是数据的“大量化”，更是包含“快速化”、“多样化”和“价值化”等多重属性。 2.&nbsp; 大数据包括两大核心技术“分布式存储”（HDFS）和“分布式处理”（MapReduce） 3.&nbsp; Hadoop的核心是分布式文件系统HDFS（Hadoop Distributed File System）和MapReduce 4. &nbsp;&nbsp; Hadoop的特性： &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 高可靠性 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 高效性 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 高可扩展性 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 高容错性 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 成本低 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 运行在Linux平台上 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 支持多种编程语言 5. &nbsp;&nbsp; 一个基本的Hadoop集群中的节点主要有 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp; NameNode：负责协调集群中的数据存储 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp; DataNode：存储被拆分的数据块 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp; JobTracker：协调数据计算任务 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp; TaskTracker：负责执行由JobTracker指派的任务 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp; SecondaryNameNode：帮助NameNode收集文件系统运行的状态信息 </td> 
 </tr> 
 </tbody> 
</table>

转载于:https://www.cnblogs.com/qianmo123/p/11443535.html