Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
重启CDH服务
找到cm的目录 cd opt cm 5 13 2 etc init d 查看sever状态 cloudera scm server status 重启server cloudera scm server restart 再次查看sever状
Hadoop
CDH
CDH6 开启kerberos Hive的Sentry 用户权限分配
Apache Sentry是Cloudera公司发布的一个Hadoop开源组件 截止目前还是Apache的孵化项目 它提供了细粒度级 基于角色的授权以及多租户的管理模式 Sentry当前可以和Hive Hcatalog Apache Sol
CDH
租户
CDH多租户配置过程中遇到的问题
多租户是CDH里面非常重要的一部分 从一开始配置KDC到集成KDC 服务使用过程中都有可能会遇到各种各样的问题 下面我举例说下我当时遇过的问题 希望能帮助到大家 服务启动错误 KDC服务配置完成安装完成 CDH集成过程中也没问题 CDH启动
CDH
租户
kafka创建话题遇到的错误
确定Kafka安装和启动正确 ZooKeeper可以查到所有的Brokers 但执行 kafka topics sh create zookeeper localhost 2181 replication factor 3 partitio
kafka
CDH
并发下sftp连接报错——com.jcraft.jsch.JSchException: connection is closed by foreign host
当对单接口极限测试时 随着并发量上升 接口稳定性出现不稳定的情况 排查后台日志 发现报错在该接口调用sftp上传时出现问题 确切的是在初始化连接时失败 原因 系统SSH终端连接数配置过小 查看虚拟机该参数 该参数在 etc ssh sshd
Liunx
CDH
HUE+LDAP+HIVE,报错:PLAIN auth failed: Error validating LDAP user
我已经为hue集成了ldap 本次为hive集成ldap认证之后 登录hue后 在hive editor中执行sql语句报如下错误 Bad status 3 PLAIN auth failed Error validating LDAP u
Bug解决
CDH
HUE
LDAP
hive
当从 Java 进程查看时该主机的主机名称和规范名称不一致。
查看日志发现是node27 data com 和node27不一致 sed i s data com etc sysconfig network service network restart 最后还没好 第二天我又重新设置了 vim et
学习
CDH
主机名不规范
关于搭建CDH中遇到的问题
本人搭建的cdh版本是5 10 1 服务器的版本是redhat 7 4 在搭建cdh的过程中遇见了下列问题 分享出来给大家参考参考 一 CDH搭建成功以后 安装服务的过程中突然崩溃的步骤 解决 1 gt 删除Agent节点的UUID rm
CDH
spark
HDFS
Hadoop之CDH安装
1 离线数据存储及查询环境部署 离线数据的存储与查询主要是以hadoop为中心的技术栈 包括hive hbase hue kylin等 部署hadoop的方式比较流行的主要有三种 1 直接部署Apache Hadoop 即手工部署 需要自己
Hadoop
大数据
CDH
Centos7一点心德
1 在centos7中发现没有table键补全的命令 需要手动去输出 效率不高 但是yum提供了自动补的命令安装 root localhost systemctl restart htt 死活补全不了 常用的命令还可以接受 碰到不常用的命令
CDH
netstat命令
永久修改主机名
Centos7自动补全的命令
cdh添加第三方服务
以自己写的一个java程序为例 1 制作parcel包 1 1 我的程序结构如下 root cdh3 nameaddress 1 0 cd nameaddress root cdh3 nameaddress ll 总用量 9420 drwx
CDH
Hbase集群调优
一 hbase现有硬件资源的理论性能 1 集群容量规划公式 优化调整 发挥硬件的最大优势 Disk Size Java Heap RegionSize MemstoreSize ReplicationFactor HeapFractionF
Liunx
CDH
Hbase
Zookeeper
Java
CDH简介及CDH部署、原理和使用介绍( 版本6.3.1 )
CDH简介及CDH部署 原理和使用介绍 版本6 3 1 第一章 CDH简介 CDH概念 CDH是Cloudera的100 开源平台发行版 包括Apache Hadoop 专为满足企业需求而构建 CDH提供开箱即用的企业使用所需的一切 通过将
大数据
CDH
Cloudera
apache
etl工程师
HDFS巡检、监控、调优、排障
1 巡检 HDFS 为集群提供高可用性弹性存储服务 是集群的存储主体 每日早晚巡检HDFS 服务 包括HDFS 服务可用性 存储使用率 datanode 是否有故障盘等 1 1 HDFS 总体状态 HDFS 状态 如下的红色提示需要关注 H
CDH
Liunx
Hbase
Linux
Cloudera 简介、安装和升级、管理、操作文档
http cwiki apachecn org pages viewpage action pageId 1540344 Cloudera 简介 Cloudera 提供一个可扩展 灵活 集成的平台 可用来方便地管理您的企业中快速增长的多种多
机器学习
PRD
Hadoop
CDH
Cloudera
CDH启动tserver报错:java.lang.IllegalStateException: Multiple processes with same name
现象 在CDH界面上重启kudu tserver时界面报错 xff1a 原因 1 首先查看cloudera scm agent的日志cm log cloudera scm agent supervisord log xff0c 看到 xff
CDH
tserver
Java
lang
IllegalStateException
CM&CDH安装
笔者当时自己装CM amp CDH看了不下10篇博客 xff0c 重装集群不下3次 xff0c 后来快照这个功能深深的刻在了我的心里 这篇博客笔者呕心沥血啊 不过还是会有同学会挂掉 xff0c 所以希望大家做到那里一步记得快照 发一下牢骚
amp
CDH