Hadoop

Hadoop2.7.4 高可用(HA)集群搭建

---

0. 集群部署节点角色的规划（3节点）node-01 namenode resourcemanager zkfc nodemanager datanode zk-01 journa...

---

阅读全文

2017-01-30 蔺光岭 0 条评论

Hadoop

Hadoop2.7.4 安装部署问题总结

---

hadoop的日志目录（/home/hadoop/app/hadoop-2.6.4/logs）1、hadoop启动不正常用浏览器访问namenode的50070端口，不正常，需要诊断问题出在哪里...

---

阅读全文

2017-01-28 蔺光岭 0 条评论

Hadoop

Hadoop2.7.4 集群搭建

---

0. 集群部署节点角色的规划（3节点）node-01 namenode datanode nodemanager zk-01 node-02 ...

---

阅读全文

2017-01-26 蔺光岭 0 条评论

Linux

Linux常用命令

---

日志操作命令查看当前所在的工作目录的全路径 pwd[root@node-01 ~]# pwd /root查看当前系统的时间 date[root@node-01 ~]# date +%Y-%m-%...

---

阅读全文

2017-01-20 蔺光岭 0 条评论

SPARK

SparkRDD：知识点总结

---

学习目标掌握RDD是什么掌握RDD的五大特性掌握如何创建RDD掌握RDD的常用算子操作掌握RDD的缓存机制RDD容错机制之checkpoint什么是RDDRDD（Resilient Distri...

---

阅读全文

2017-01-18 蔺光岭 0 条评论

SPARK

Spark Streaming:知识点总结

---

学习目标掌握Spark Streaming的原理和架构掌握DStream的相关操作实现Spark Streaming与flume整合实现Spark Streaming与kafka整合什么是Spa...

---

阅读全文

2017-01-16 蔺光岭 0 条评论

SPARK

Spark案例：Java语言编程单词计数

---

实例描述  通过java编写spark的单词计数程序。测试数据1.txthello world hello hadoop hadoop hivepom.xml文件<?x...

---

阅读全文

2017-01-14 蔺光岭 0 条评论

SPARK

Spark案例：Scala语言编程单词计数

---

实例描述  通过scala编写spark的单词计数程序。测试数据1.txthello world hello hadoop hadoop hivepom.xml文件<?...

---

阅读全文

2017-01-14 蔺光岭 0 条评论