在centos上配置hadoop分布式文件系统(hdfs)时,需要修改以下关键配置文件:
-
core-site.xml:
- fs.defaultFS:指定HDFS的默认文件系统地址,例如 hdfs://localhost:9000。
- hadoop.tmp.dir:指定Hadoop临时文件的存储目录。
- hadoop.proxyuser.root.hosts 和 hadoop.proxyuser.root.groups:配置root用户的代理用户。
-
hdfs-site.xml:
- dfs.http.address:指定NameNode的HTTP地址。
- dfs.namenode.secondary.http-address:指定Secondary NameNode的HTTP地址。
- mapreduce.jobhistory.address 和 mapreduce.jobhistory.webapp.address:指定MapReduce作业历史的地址和Web界面地址。
-
mapred-site.xml:
- mapreduce.framework.name:指定MapReduce框架的名称,通常为 yarn。
-
yarn-site.xml:
小麦企业网站展示系统1.1下载小麦企业网站展示系统介绍:一、安装使用将xiaomai.sql导入数据库二、后台登录后台帐号,密码默认都是admin,config.php 配置文件可根据自行需要修改,IP地址,数据库用户名,密码,及表名后台目录默认admin,支持自行任意修改目录名三、注意事项1 本源码完全免费,采用伪静态,减少不必要的源码重复,速度更快,支持二次开发。2、注明本程序编码为UTF8,如发生乱码,请注意修改编码3、
- yarn.resourcemanager.address:指定ResourceManager的地址。
- yarn.resourcemanager.scheduler.address:指定ResourceManager的调度器地址。
- yarn.resourcemanager.resource-tracker.address:指定ResourceManager的资源跟踪器地址。
- yarn.nodemanager.aux-services 和 yarn.nodemanager.aux-services.mapreduce_shuffle.class:指定NodeManager的辅助服务。
- yarn.nodemanager.vmem-check-enabled 和 yarn.nodemanager.disk-health-checker.max-disk-utilization-per-disk-percentage:配置NodeManager的内存和磁盘检查。
在修改这些配置文件后,通常需要执行以下步骤:
- 格式化NameNode:hdfs namenode -format
- 启动HDFS服务:./sbin/start-dfs.sh
- 停止HDFS服务:./sbin/stop-dfs.sh
请注意,具体的配置步骤和文件路径可能会根据Hadoop版本和具体需求有所不同。建议参考官方文档或相关教程以确保配置的正确性。









