标签:hadoop
hadoop学习笔记
MapReduce的运行流程:容错机制:1,重复执行2,推测执行hadoop运行状态进程有SecondaryNameNode、NameNode、DateNode、TaskTracker、JobTrackerWordCount demo使用:1/ java -classpath /opt/hadoop-1.2.1/hadoop-core-1.……
07-02 立刻查看
10分钟学习大数据之hadoop实战经典-第04讲
10分钟学习大数据之hadoop实战经典-第04讲 Hadoop集群构建硬件选择、集群规模、网络拓扑、机架感知等内容提纲:Hadoop硬件选择最低要求中央处理器:两个四核英特尔 Xeon 2.0 GHz CPU内存:8G ECC RAM存储器:4 x TB SATA 磁盘网络:千兆位以太网网络拓扑结构机架感知……
12-10 立刻查看
10分钟学习大数据之hadoop实战经典-第02讲
10分钟学习大数据之hadoop实战经典-第02讲10分钟从技术角度理解Hadoop Hadoop的核心HDFS: Hadoop Distributed File System 分布式文件系统MapReduce:并行计算框架Yarn:集群资源管理和调度框架Hadoop是什么?适合大数据的分布式存储、计算、资源管理平台作者:Do……
12-09 立刻查看
10分钟学习大数据之hadoop实战经典-第01讲
Hadoop简易实战入门经典教程–第01讲为什么会有第一代大数据技术Hadoop和第二代大数据技术Spark?内容提纲:大数据要解决的三大核心问题存储多种计算范式处理速度Hadoop+SparkHadoopOne stack to rule them allSparkThe codebase in Spark 1.0……
12-09 立刻查看