1.扩容在新的物理机上安装kafka程序，修改config/server.properties文件里的broker.id必须在集群中唯一，修改其他必要的配置项，其中zookeeper.connect配置项，写上kafka集群现在使用的zookee...

报错日志： xx ms has passed since last append / xx ms has passed since batch creation plus linger time / ms has passed since las...

​  在hive控制台设置执行 set mapred.max.split.size=100000 时报错：cannot modify mapred.max.split.size at runtime。 问题描述 合并小文件可在map 端...

前段时间维护TBDS平台时，HDFS的namenode一直启动不了，查看namenode日志，显示错误 No filter named org.apache.hadoop.hdfs.web.AuthFilter 这种错误很难找到原因 最后排查配置...

Ranger中HBase默认权限策略 使用admin用户登录http://192.168.1.154:6080 页面，点击cm_hbase 进入该页面 在该页面中可以看到默认有两个策略，第一个是hbase 用户的策略，默认拥有所有目录所有权限，...

在spark/conf下，找到spark-default.conf 添加参数 spark.driver.host  192.168.xx.xx

Compute simple queries using stats only 参数设为false hive.compute.query.using.stats=false

添加参数： --driver-java-options "-Xss10m"

Hive字段中文乱码，如执行 show create table xxx 时，表级别注释、字段级别注释发现有乱码现象， 一般都是由hive 元数据库的配置不当造成的。 此时可按如下步骤进行配置调整： 登录hive的元数据库mysql中： 1、设置...

经过分析查询，是集群参数yarn.nodemanager.local-dirs配置成/tmp/local目录，造成磁盘空间不足导致。将该参数改成yarn.nodemanager.local-dirs  /data/hadoop/yarn...