zookeeper:zk
保证高可靠、高可用的协同服务
集中式服务,用于配置信息,名称服务,分布式同步处理
ZK组件
1.Client
向Server周期性发送信息,表明自己还活着,Server向Client回应确认消息。
Client...
lampnick
8年前 (2017-05-28) 2276℃ 0评论
1喜欢
Hbase
1.介绍
是分布式面向列的数据库,构建在hadoop之上,类似于google的big table,对海量结构化数据的快速随机访问。是hadoop生态系统的一部分,提供随机实时读写。
2.Hbase和Hadoop的区别
HDFS ...
lampnick
8年前 (2017-05-20) 2361℃ 0评论
1喜欢
RDBMS
Relation Database Management System 关系型数据库管理系统
OLTP:online transaction process.在线事务处理
A.原子性
C.一致性
I.隔离性
...
lampnick
8年前 (2017-05-14) 1833℃ 0评论
0喜欢
eclipse中的maven项目需要查看源代码时
项目不能够正常下载可以使用手动命令强行下载源代码
$>mvn dependency:sources -DdownloadSources=true(pom.xml所在文件夹执行)
JVM远程调试
[远端(s100,...
lampnick
8年前 (2017-05-04) 3892℃ 0评论
1喜欢
### 自定义机架感知
0. 数据节点的量
```
[rack1]
s100
s101
s102
[rack2]
s103
s104
s105
s106
```
1. 创建类实现DNSToSwitchMapping接口
2. 配置文件c...
lampnick
8年前 (2017-04-23) 1947℃ 0评论
0喜欢
常用命令
1.格式化系统
hadoop namenode -format
2.hadoop fs
hadoop fs -help put
3.hdfs dfs
4.put === copyFromLocal
hadoop fs -put ...
lampnick
8年前 (2017-04-11) 1866℃ 0评论
0喜欢
hadoop脚本分析
1.start-all.sh
libexec/hadoop-config.sh --设置变量
sbin/start-dfs.sh --config $HADOOP_CONF_DIR --启动hdfs
...
lampnick
8年前 (2017-04-10) 3018℃ 0评论
0喜欢
向hadoop 文件系统里面put文件时报_COPYING_ could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s) running and no n...
lampnick
8年前 (2017-04-09) 2293℃ 0评论
2喜欢
问题:在配置了免密码登录的hadoop集群中执行远程命令出现找不到此命令的错误。
执行命令为:xcall java -version,xcall(《自定义脚本执行远程命令-xcall》这个文章中有介绍此脚本)的原型为$>ssh hostname "java -version...
lampnick
8年前 (2017-04-09) 7919℃ 0评论
6喜欢
hadoop包含四个模块
1.Hadoop Common
支持其他模块的工具模块
2.Hadoop Distributed File System(HDFS)
分布式文件系统,提供了对应程序数据的高吞吐量访问
[进程]
NameNode ...
lampnick
8年前 (2017-04-09) 1849℃ 0评论
0喜欢