nginx警告： nginx: [warn] could not build optimal types_hash, you should increase either types_hash_max_size: 1024 or types_hash_bucket_size: 64; ignoring types_hash_bucket_size 修改nginx.conf types_hash_max_size: 2048; 还警告： [root@node01 ~]# systemctl status
[hadoop@node01 install]$ cd /kkb/soft/ [hadoop@node01 soft]$ tar -zxvf hbase-2.2.6-bin.tar.gz -C /kkb/install/ 3.1、修改hbase-env.sh文件 [hadoop@node01 soft]$ cd /kkb/install/hbase-2.2.6/conf [hadoop@node01 conf]$ vim hbase-env.sh export JAVA_HOME=/kkb/
ps:需求： 确定时间同步服务器： node01 (node02 node03 都去node01同步时间) 服务器设置 1、确保时间服务器的ntpd服务是开启的 2、修改第一个配置文件 vim /etc/ntp.conf 添加如下内容 restrict 10.32.176.0 mask 255.255.255.0 nomodify notrap server 127.
文章目录 准备工作 一、搜索命令1.find 搜索1.1 目标1.2 路径1.3 实现 : 在指定目录中根据名称搜索命令格式第一步: 搜索指定目录下, 文件是 abc.txt的文件第二步: 搜索指定目录下, 文件名 包含 `1` 的文件第三步: 搜索指定目录下,所有以`.txt` 为扩展名的文件第四步: 搜
环境准备 安装常用工具 yum install -y wget telnet net-tools lrzsz vim zip unzip ntpdate yum-utils ntp ntpdate device-mapper-persistent-data lvm2 jq psmisc telnet ipvsadm ipset sysstat conntrack libseccomp 修改主机名 将master节点主机名修改为k8s-master01 node节
本文使用的是DR模型，其它模式有D-NET,TUN模式。 DR模型的优点： DR模型基于四层负载，速度快，不和客户端经过握手协议，只是偷窥了一下握手包， 过程是偷偷修改了arp，改动非常小效率高，此时获取RS（真正的后台服务器）的mac地址，基于下一条机制，数据包就能传输到RS服务器上，而RS服务器上又
Slurm及OpenLDAP部署 概述 Slurm是一个开源、容错且高度可扩展性的集群管理和作业调度系统，用于大型和小型Linux集群。 Slurm提供三种关键功能： 分配对资源的排他和/非排他访问 提供一个用于在分配的节点集上启动、执行和监视作业的框架 通过管理一个未完成作业队列来解决对资源
默认情况下，Spark程序运行完毕关闭窗口之后，就无法再查看运行记录的Web UI(4040)了，但通过 HistoryServer 可以提供一个服务, 通过读取日志文件, 使得我们可以在程序运行结束后, 依然能够查看运行过程。本篇博客，博主就为大家带来在Spark上配置JobHistoryServer的详细
本篇博客，Alice为大家带来的是Spark的HA高可用环境搭建的教程。 原理 Spark Standalone集群是Master-Slaves架构的集群模式，和大部分的Master-Slaves结构集群一样，存在着Master单点故障的问题。 如何解决这个单点故障的问题，Spark
一、准备环境 node01 192.168.0.2 CentOS Linux release 7.6.1810 (Core) 安装包：http://nginx.org/download/nginx-1.20.1.tar.gz 二、安装步骤 1、下载安装包 wget -c http://nginx.org/download/nginx-1.20.1.tar.gz 2、解压安装包 [root@node01 ~]# tar xf nginx-1.20.1.
网上查到的没有主机路由问题提到的大多是防火墙问题： 查看防火墙状态：firewall-cmd --state 关闭防火墙：(需注意的是，必须关闭防火墙自启动，再启动datanode才会正常) centos7： [al@node01 sbin]$ sudo systemctl stop firewalld //关闭防火墙 [al@node01 sbin]$ sudo systemctl sta
测试环境k8s节点经常出现pod被驱逐的状态，如下：[root@master bin]# kubectl get pod -A|grep Evicted middleware gitlab-7fd64c6d-2mv8v 0/1 Evicted
修改主机名 查看主机名称 hostnamectl status //永久性的修改主机名称，重启后能保持修改后的。 hostnamectl set-hostname xxx //删除hostname hostnamectl set-hostname "" 修改成功修改主机名映射 vi /etc/hosts 192.168.10.141 node01.hadoop.com node01 192.168.
CentOS 7二进制包部署MySQL 8.0一、关闭防火墙[root@node01 ~]# systemctl disable firewalld && systemctl stop firewalld[root@node01 ~]# systemctl status firewalld● firewalld.service - firewalld - dynamic firewall daemon Loaded: loaded (/usr/lib/systemd/system/
文章目录 准备工作 一、搜索命令1.find 搜索1.1 目标1.2 路径1.3 实现 : 在指定目录中 根据名称 搜索命令格式第一步: 搜索指定目录下, 文件是 abc.txt的文件第二步: 搜索指定目录下, 文件名 包含 `1` 的文件第三步: 搜索指定目录下,所有以`.txt` 为扩展名的文件第四步:
| 管道相关命令 目标 cutsortwcuniqteetrsplitawksedgrep 准备数据 zhangsan 68 99 26 lisi 98 66 96 wangwu 38 33 86 zhaoliu 78 44 36 maq 88 22 66 zhouba 98 44 46 以上是成绩表信息 使用 逗号 分割, 第一列 是 姓名, 第二列是 语文成绩, 第三列是 数学成绩, 第四列
一、多租户与权限 概述 每一个RabbitMQ服务器都能创建虚拟的消息服务器，我们称之为虚拟主机，简称vhost。每一个vhost本质上都是一个独立的小型RabbitMQ服务器，拥有自己独立的队列、交换器及绑定关系，它拥有自己独立的权限。vhost就像是虚拟机与物理服务器一样，各个实例见提供逻辑
服务器 node01 node02 node03 HDFS NameNode HDFS SecondaryNameNode HDFS DataNode DataNode DataNode YARN ResourceManager YARN NodeManager NodeManager NodeManager 历史日志服务器 JobHistoryServer 第一步: 准备环境 准备了3台centos8的服务
hadoop安装（超级详细） 1、hadoop安装前的准备 （1）、准备虚拟的多台设备 我们需要用虚拟机创建3台centos的系统，并配置三台设备的静态虚拟地址，我的3台设备地址为： 192.168.198.136 192.168.198.137 192.168.198.138 vi /etc/sysconfig/network-scripts/ifcfg-ens33 IPADDR=192.168.1
一、准备工作 CentOS搭建最新版Prometheus将RabbitMQ集群指标exporter到Prometheus 二、获取InfluxDB [root@node01 ~]# wget https://dl.influxdata.com/influxdb/releases/influxdb-1.8.3.x86_64.rpm [root@node01 ~]# ll total 97488 -rw-r--r--. 1 root root 64097226 Se
上面这张思维导图喜欢就拿走，2021年，决定写大数据了。 文章目录 大数据常用技术词汇Hadoop集群Hadoop介绍集群搭建前的准备设置静态ip配置阿里云yum源安装JDK克隆一个虚拟机配置ssh免密码登录下载hadoop修改配置文件修改文件hadoop-env.sh修改文件workers修改文件core-sit
List 类型介绍命令列表命令实例扩展-应用场景 类型介绍 Redis中的List和Java中的List类似,可以存放很多东西, 注意:Redis中的List底层实现是链表(类似于Java中的LinkedList) 补充一下:Java中的ArrayList和LinkedList ArrayList:底层是动态数组(可以扩容的数组), 根据
Set 类型介绍命令列表命令实例扩展-应用场景 类型介绍 Redis中的Set类似于Java中的HashSet, 里面可以存放很多不重复的元素,也就是说可以去重,但是是无序的还需要特别注意的是Redis中的Set也支持多种集合运算,如求交集,并集,差集… 命令列表 命令原型时间复杂度命令描述
ZSet 类型介绍命令列表命令实例扩展-应用场景 类型介绍 Redis中的ZSet就是SortedSet有序Set, 和Java中的TreeSet类似注意: Redis中的ZSet通过一个Score分值来保证顺序ZSet的其他特点和Set一样, 如不能存重复值, 但是Score可以是重复的 命令列表 命令原型时间复杂度命
