Hadoop-1 安装及基本shell命令

0 条评论
  1. 什么是hadoop

    • 对海量数据进行分布式处理
    • 三个核心组件:HDFS分布式文件系统、YARN运算资源调度系统、MAPREDUCE分布式运算编程框架

阅读全文

世界真快-Maven更换阿里云仓库

0 条评论

每次拉一个像hadoop这种项目,maven中央仓库慢的整个世界都不好了,然而自从换了阿里云的仓库以后,步行改飞行了!!!爽!!!
在maven安装目录的conf下的setting.xml中配置mirrors

1
2
3
4
5
6
<mirror>
<id>alimaven</id>
<mirrorOf>central</mirrorOf>
<name>aliyun maven</name>
<url>http://maven.aliyun.com/nexus/content/groups/public/</url>
</mirror>

阅读全文

使用源码学Flume

0 条评论

使用flume源码进行学习的话会比较有直观的感受

flume资源

阅读全文

SSH免密登陆

0 条评论
  1. 目标
    A登陆到B不需要密码

    1
    2
    3
    4
    5
    6
    7
    now:
    A --->pwssword--->B
    will:
    A ---> B

阅读全文

哈哈哈,深圳

0 条评论

我一直觉得一座城市有了山,就有了坚实的根基,有了水,就能够灵动,一座城也就“活”了。
群山靠海,这是深圳
很美

在南方
十月的夏天和十一月的秋天

不用力量
用心
戴着耳机
背着行囊
骑着单车
穿过干净的柏油马路
哦,还有一双人字拖
把太阳拉成长条
哈哈哈
你会吃
Tomato & Orange

风起的时候
大笑一场

大哭一场

准备进发
加油加油!!!
所有的光和热
在山与海的那头汇聚
我会
翻过山
跨越海

追逐

阅读全文

2017我想翻一座山

0 条评论

2017,我想翻一座山

阅读全文

kafka常用操作(不定期更新)

0 条评论

说明

kafka官网
kafka version 2.10
所有kafka的操作都是基于kafka2.10包下bin目录下的脚本文件

阅读全文

中秋杂记

0 条评论

记忆里有段时光温柔的像水一样,去年的昆山,在常下雨的南方,一个人,中秋,有音乐,有单反,有明月,亦有思念与牵绊,反倒不感觉孤单,相反,有种简单到直白的快乐与充足。跑了很多地方,然后静静看着春雨落、夏夜至、秋风起,坚定向前!

时光时光,一年的光景转瞬即逝,自己思考一下成长了多少?其实细细想来算是成长的不快不慢吧,感觉这段路走的还是很温柔的,就像微风中的一根羽毛。如果说有遗憾,就是夏天过得太快了,我最喜欢的夏天,毕业的太匆忙了,没有留白的水墨画一样就这么突兀的结束了。

阅读全文