CDH集群Kerberos报错:Host XXX has upper-case characters in its name ...

问题集群是以前搭建的,发现报了个这样的错误,Kerberos异常,搜了一下资料,发现是host映射的问题,/etc/hosts里面写的主机名是大写,然后cdh里面组集群用的大写主机名,kerberos使用的主机名又是小写,所以导致这个问题。处理方法在集群所有节点下的/etc/hosts里面有大写主机名的(报错的基本都是大写),在前面全部添加一个小写的,大写不动(原大写的删除了会影响集群通信),如下:#旧 192.168.1.100 NODE01 192.168.1.101 NODE02 #新 192.168.1.100 node01 NODE01 192.168.1.101 node0...

大数据 2021-06-18 PM 476℃ 0条

redis多主多从集群搭建

准备准备两台机器(CenntOS7),本文是做双主机 3主3从集群,下列所有操作两台机器均需操作,根据实际情况,可以多机器,比如6个机器3主3从,或者N主N从下载安装直接官网下载,这里用的是redis5.0.7版本tar -zxvf redis-5.0.7.tar.gz cd redis-5.0.7 make make test && make install系统环境配置echo never > /sys/kernel/mm/transparent_hugepage/enabled echo "echo never > /sys/kernel/mm/...

Linux 2021-05-27 AM 807℃ 2条

Watchtower自动更新 Docker 镜像与容器

介绍Watchtower 是一个可以实现自动化更新 Docker 基础镜像与容器的实用工具。它监视正在运行的容器以及相关的镜像,当检测到本地的镜像与镜像仓库中的镜像有差异时,它会拉取最新镜像并使用最初部署时相同的参数重新启动相应的容器Watchtower官方地址自动更新所有容器镜像docker run -d \ --name watchtower \ --restart always \ -v /var/run/docker.sock:/var/run/docker.sock \ containrrr/watchtower \ --cleanup #加上cleanup参数为自动删除旧镜像...

docker 2021-05-24 AM 887℃ 0条

MySQL "is marked as crashed and should be repaired"异常问题处理

场景用工具连MySQL跑数据的时候发现挂掉了,查看发现磁盘写满了,磁盘扩容后,重启mysql发现起不来,查看日志2021-05-18T02:21:25.491074Z 0 [ERROR] /usr/sbin/mysqld: Table './mysql/user' is marked as crashed and should be repaired2021-05-18T02:21:25.491101Z 0 [ERROR] Fatal error: Can't open and lock privilege tables: Table './mysql/user' is marked a...

数据库 2021-05-18 PM 496℃ 0条

CM启动无法连接MySQL问题

现象CM启动完后,过一会就挂掉了,查看配置什么的都没有问题,查看异常日志发现是mysql连接问题SCM错误信息Mon May 17 17:24:02 CST 2021 WARN: Establishing SSL connection without server's identity verification is not recommended. According to MySQL 5.5.45+, 5.6.26+ and 5.7.6+ requirements SSL connection must be established by default if explicit op...

数据库,大数据 2021-05-17 PM 473℃ 0条

客户端连接CM集成kafka超时问题

现象kafka连接即使客户端配置了ip+端口的方式,也会出现连接超时(大约5min),在hosts上面手动指定kafka的主机和ip后就正常了常规处理方法1、客户端写host(如果客户端多的话,会很繁琐,不推荐)2、添加DNS(如果有内部DNS的话,推荐)3、网上说的修改kafka服务器如下配置,实际上CM集成的kafka修改配置重启后并没有效果#/opt/cloudera/parcels/KAFKA/etc/kafka/conf.dist/server.properties #listeners=PLAINTEXT://:9092 listeners=PLAINTEXT://192.1...

大数据 2021-05-07 AM 414℃ 1条

Windows文件共享日志审计功能及输出到syslog服务器

开启文件共享日志审计1、在文件共享的目录上右键->安全->高级->审核2、添加,主体选择Authenticacted Users或者Everyone,勾选如下权限,然后确定3、打开事件查看器,定位到Windows日志->安全,可以看到已经有日志过来了,这里主要有用的事件id是4663和4659:安装nxlog采集日志1、安装过程不多描述,装完之后改配置文件如下:define ROOT C:\Program Files (x86)\nxlog Moduledir %ROOT%\modules CacheDir %ROOT%\data Pidfile %ROOT%\...

Windows 2021-03-31 PM 1219℃ 0条

AD域的计算机用户自主控制文件夹权限

基于对windows文件共享的权限精细控制需求,编了一个小脚本可以实现加了AD域的计算机用户自主控制文件夹权限实现功能:1、只有自己可编辑;2、别人只读;3、别人可修改不可删除;[email protected] off echo . 把文件或文件夹拖到这个bat上面使用 for /F %%i in ('whoami /upn') do (set user=%%i) for /F %%x in ('whoami /fqdn') do (set team=%%x) for /F "tokens=1,* delims=," %%m in ("%team%&q...

Windows 2021-03-31 PM 902℃ 0条