环境搭建,JAVA引导,Hadoop搭建_光环大数据培训

上传人:gua****an 文档编号:51485451 上传时间:2018-08-14 格式:DOCX 页数:2 大小:41.01KB
返回 下载 相关 举报
环境搭建,JAVA引导,Hadoop搭建_光环大数据培训_第1页
第1页 / 共2页
环境搭建,JAVA引导,Hadoop搭建_光环大数据培训_第2页
第2页 / 共2页
亲,该文档总共2页,全部预览完了,如果喜欢就下载吧!
资源描述

《环境搭建,JAVA引导,Hadoop搭建_光环大数据培训》由会员分享,可在线阅读,更多相关《环境搭建,JAVA引导,Hadoop搭建_光环大数据培训(2页珍藏版)》请在金锄头文库上搜索。

1、 光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/ 光环大数据光环大数据 http:/环境搭建,环境搭建,JAVAJAVA 引导,引导,HadoopHadoop 搭建搭建_ _光环大数据培训光环大数据培训后续的文章会把我实践的内容分解成为一个个的小模块,方便大家的学 习,交流。文未我也会附上相关的代码。一起加油! 学有三年的大数据原理, 一直没有实践过。最近准备离职,正好把自己所学的大数据内容全部实践一下, 也不至于只会纯理论。面对实践,首先要有空杯心态,倒空自己之后,才能学 到更多,加油!也希望大家多关注,以后会更多注重实践跟原理的结合。环境搭建对于大数据,重点在于 h

2、adoop 的底层架构。虽说现在 spark 架构用的还是 比较多。但 hadoop 还是基础。还有就是为什么要以 Linux 为基础,主要是因为 现行网站大部分服务端都是在 linux 系统中。这一点,个人感觉还是在文件读 取及数据调用这方面有很多优点。而 linux 的开源,又方便了大多数编程人员 对于系统的理解。而装有 linux 又对 Python 编程有很大帮助。至于坊间流传的: 人生苦短,你要用 Python.个人的理解的,用 Python 编程起来会非常简单。而 且只要是装有 Linux 系统就可以。对于环境搭建这一部分,操作过程中。最大的困难就是在于 NAT 的设置, 对于这一

3、步,没有按照视频内容一步步来操作。在为我是用无线来操作的,而 大部分个人 PC 在无线链接后获取到的 IP 都是 192.168 网段,当虚拟机要跟主 机以 NAT 方式来进行通信时,就要设置在不同网段内,而我个人是将虚拟机的 改为 172.20 的这一网段。不至于影响到后续操作。JAVA 引导对于这一部分,由于前期在 R 原理课时,学过这一块的相关设置环境变量。 再在虚机的 linux 上进行相关设置就能够深入明白其原理。并将原来引导都指 向相关路径。这一部分主要的难点就是 vim 编辑器的理解,相关命令的解释。当时最大 的困惑就是在打开一个文件后,如何编辑,如何保存退出。后来通过查找百度,

4、 看一些技术贴子之后才逐步明白 vim 编辑器的用法。还有就是对于原理的理解, 还有就是英语要好,遇到报错之后,要知道从哪里找解决的办法,并实践执行。 在一个地方卡住,一定要在一天内解决,要不然对人的学习积极性打击很大。Hadoop 搭建光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/ 光环大数据光环大数据 http:/这一部分,vim 命令是最多的。也即在 hadoop-1.2.1 下如何设置相关的参 数,最后 datanode,jobtrack,tasktrack,namenode 这些关键进程是否起来。而 这一部分,是自己在格式化 namenode 后,多次进行开启

5、服务才起来的。这一块 可能涉及到三台虚机的互联以及相互传递参数。所以这一块是最慢的。 还有一 个难点,就是你的虚机上若是没有公钥文件(我的就没有)。这就需要用 touch 来建立,而在检测用户权限的时候,又要用到 chmod 命令。总之,这一部分内 容是综上有点难度的,需要你能综合写 vim 命令,同时对 hadoop 的相关进程有 所了解。总结现在就差 Python 的命令了,就觉得,理论跟实践真的很不一样,不断的学 习过程中,不光要克服代码上的天生缺陷,也要对内核原理有更深入的理解。 好在已经养成的好习惯,会把工作中的操作都一一记录下来。便于后续学习跟 理解。也欢迎大家一起来讨论。 为什么大家选择为什么大家选择光环大数据光环大数据!大数据培训、人工智能培训、Python 培训、大数据培训机构、大数据培训班、数据分析培训、大数据可视化培训,就选光环大数据!光环大数据,聘请专业的大数据领域知名讲师,确保教学的整体质量与教学水准。讲师团及时掌握时代潮流技术,将前沿技能融入教学中,确保学生所学知识顺应时代所需。通过深入浅出、通俗易懂的教学方式,指导学生更快的掌握技能知识,成就上万个高薪就业学子。【报名方式、详情咨询报名方式、详情咨询】光环大数据官方网站报名:光环大数据官方网站报名:http:/ /mobile/mobile/

展开阅读全文
相关资源
正为您匹配相似的精品文档
相关搜索

最新文档


当前位置:首页 > IT计算机/网络 > 数据结构与算法

电脑版 |金锄头文库版权所有
经营许可证:蜀ICP备13022795号 | 川公网安备 51140202000112号