查看: 645|回复: 10

Hadoop与Hbase参数调优

  [复制链接]

641

主题

821

帖子

7801

积分

分区版主

Rank: 15Rank: 15Rank: 15Rank: 15Rank: 15

贡献
79
技术
49
活跃
11
在线时间
75 小时
擅长技术
思科华为
发表于 2015-2-8 18:14:47 | 显示全部楼层 |阅读模式
Hadoop 参数调优主要是core-site.xml、hadoop-env.sh、hdfs-site.xml、mapred-site.xml 四个文件:core-site.xml 为Hadoop 的核心属性文
件,参数为Hadoop 的核心功能,独立于HDFS 与MapReduce,其他三个文件皆为hadoop 参数文件,hadoop-env.sh 主要是完成各
进程的内存划分以及部分环境设置,hdfs-site.xml 主要是对HDFS 的端口、目录、以及HDFS 跟namenode 的通信设置(小的集群一般不用考虑)等的设置,mapred-site.xml 主要对map 与red 和JobTracker 的设置。Hadoop 有190 多个参数但一般用到的不足一半,这里常用的一些参数设置作出调整:

购买主题 已有 1 人购买  本主题需向作者支付 2 金币 才能浏览

0

主题

265

帖子

1495

积分

Mib

Rank: 4

贡献
0
技术
0
活跃
125
在线时间
10 小时
发表于 2015-5-5 21:49:33 | 显示全部楼层
谢谢谢谢谢谢谢谢

0

主题

125

帖子

655

积分

Kib

Rank: 3Rank: 3

贡献
0
技术
0
活跃
45
在线时间
6 小时
发表于 2015-11-5 00:08:11 | 显示全部楼层
谢谢,这个一定要收藏下来

0

主题

80

帖子

425

积分

Kib

Rank: 3Rank: 3

贡献
0
技术
0
活跃
40
在线时间
5 小时
发表于 2015-11-20 17:02:45 | 显示全部楼层
不错,不错,这个正是我需要的东西

0

主题

15

帖子

92

积分

Byte

Rank: 2

贡献
0
技术
0
活跃
12
在线时间
1 小时
发表于 2015-11-21 13:09:12 | 显示全部楼层
谢谢啦,路过支持一下哦

1

主题

968

帖子

6411

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
1011
在线时间
112 小时
发表于 2017-4-15 11:38:42 | 显示全部楼层
感谢分享,感谢分享

0

主题

1140

帖子

6768

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
748
在线时间
65 小时
擅长技术
思科华为
发表于 2017-4-15 12:23:16 | 显示全部楼层
asvjasvjasvjasvjasvjasvjasvjasvjasvjasvjasvjasvjasvjasvjasvjasvj

1

主题

667

帖子

4538

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
-1
活跃
1023
在线时间
35 小时
发表于 2017-8-25 11:08:51 | 显示全部楼层
dddddddddddddddddddddddddd

1

主题

410

帖子

2796

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
-100
技术
0
活跃
571
在线时间
35 小时
发表于 2017-11-17 14:53:33 | 显示全部楼层
好好好好好好好好好好好好好好好好好好好好好
使用 高级模式(可批量传图、插入视频等)
您需要登录后才可以回帖 登录 | 立即注册

快速回复 返回顶部 返回列表