憧憬

推窗新鲜的空气
半屋阳光的暖
来一点儿诗
来一点儿乐
来一点儿舞
再来点儿梦想
温湿的茶气开始氤氲
撒欢的狗子解了链子肆意的奔
就连京城的霾都不怕
天儿暖的早
没那些料峭春寒
该喝的酒可劲儿的喝
不该喝的就藏起来等该喝的时候喝
喜欢北京
就不吝对它的爱
本想风风光光的来这儿看看你
是的,我来了
一身的狼狈
嘿,管他呢,北京,我来了
好听
吉他里自弹自唱的情和爱
老板
再来一盘西蓝花
对了
你这儿有书没?
楼高
就想着从高高的高楼上一跃而下
然后被有弹力的绳子狠狠地甩上去
惯了生
就想着看看死
最好是在梦里
霍金今天走了
Kindle里躺着没毅力翻完的《时间简史》
没有悲喜
开始做一个又一个的梦
天上
地下
海里
大风
大雨
大雪
大晴天
努力去想象
未来的样子
认真
憧憬

阅读全文

北京,北京

踩着冬天的尾巴来到了北京
2018的春天里,加油!!!
北京,北京!
我又回来啦!!

阅读全文

Spark算子之TransFormation

  • Spark算子分为 Transformations | Action 两类
  • Transformations 为懒加载,只记录元数据,并不触发计算行为
  • Action 将触发计算行为

    官方文档

阅读全文

Win10开放端口让局域网内访问

之前主要注重的是博客的PC端,后来在调试移动端的时候发现手机不能访问本地调试的4000端口,What?
那么当然就是Win10的端口没有对外开放啦,So依次点击:

  1. Win10安全中心(右下)

阅读全文

Hexo免密部署到github

每次用Hexo部署的时候,都要输入用户名和密码,太麻烦了,所以做一下免密登陆就很方便了

阅读全文

Hadoop-3 Mapreduce和Wordcount

  1. 场景描述
    存在像
    1
    2
    3
    diyishuai hello hi hadoop
    spark kafka flume zookeeper
    ...

阅读全文

Hadoop-2 Win10下调用Java客户端

  1. win10开发环境准备工作

    • 方式1 :
      • 解压tar包

阅读全文

Hadoop-1 安装及基本shell命令

  1. 什么是hadoop

    • 对海量数据进行分布式处理
    • 三个核心组件:HDFS分布式文件系统、YARN运算资源调度系统、MAPREDUCE分布式运算编程框架

阅读全文

世界真快-Maven更换阿里云仓库

每次拉一个像hadoop这种项目,maven中央仓库慢的整个世界都不好了,然而自从换了阿里云的仓库以后,步行改飞行了!!!爽!!!
在maven安装目录的conf下的setting.xml中配置

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
<settings xmlns="http://maven.apache.org/SETTINGS/1.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/SETTINGS/1.0.0
http://maven.apache.org/xsd/settings-1.0.0.xsd">
<localRepository/>
<interactiveMode/>
<usePluginRegistry/>
<offline/>
<pluginGroups/>
<servers/>
<mirrors>
<mirror>
<id>aliyunmaven</id>
<mirrorOf>*</mirrorOf>
<name>阿里云公共仓库</name>
<url>https://maven.aliyun.com/repository/public</url>
</mirror>
<mirror>
<id>aliyunmaven</id>
<mirrorOf>*</mirrorOf>
<name>阿里云谷歌仓库</name>
<url>https://maven.aliyun.com/repository/google</url>
</mirror>
<mirror>
<id>aliyunmaven</id>
<mirrorOf>*</mirrorOf>
<name>阿里云阿帕奇仓库</name>
<url>https://maven.aliyun.com/repository/apache-snapshots</url>
</mirror>
<mirror>
<id>aliyunmaven</id>
<mirrorOf>*</mirrorOf>
<name>阿里云spring仓库</name>
<url>https://maven.aliyun.com/repository/spring</url>
</mirror>
<mirror>
<id>aliyunmaven</id>
<mirrorOf>*</mirrorOf>
<name>阿里云spring插件仓库</name>
<url>https://maven.aliyun.com/repository/spring-plugin</url>
</mirror>
</mirrors>
<proxies/>
<profiles/>
<activeProfiles/>
</settings>

阅读全文

使用源码学Flume

使用flume源码进行学习的话会比较有直观的感受

flume资源

阅读全文