ICode9

精准搜索请尝试: 精确搜索
首页 > 数据库> 文章详细

FlinkCDC-Postgresql篇(版本9.X)

2022-07-11 00:36:57  阅读:221  来源: 互联网

标签:pgsql Postgresql FlinkCDC devtoolset repo yum 版本 wget archive


1.PostGreSQL准备

1.修改pg_hba.conf,在#IPV4 local connection下添加

其中all,可以修改为flinkCDC中的访问用户。

# IPv4 local connections:
host    replication             all     [访问者IP]/32          trust

2.开启WAL归档

​ 2.1 创建归档目录,目录所在文件

	mkdir -p $PGDATA/archive_wals
	chown -R postgres.postgres $PGDATA/archive_wals

​ 2.2 修改postgresql.conf 内的参数

​ 一定要按照这上面去设置,尤其是archive_command 和wal_level这两个参数

	max_wal_senders = 50  #流式程序连接数,看情况修改,提醒:PostGreCDC Connect并行度只能为1且不能修改。
	wal_level='logical';	#wal级别
	archive_mode='on'		#存档模式,默认关闭
	archive_command ='cp %p /pgdata/11/archive_wals/%f';	 #wal存档目录
	max_replication_slots = 20 	#复制槽数为20

3.配置postgres-decoderbufs

3.1将yum源替换为aliyun的,安装之前先执行yum -y install wget 检查wget命令有没有安装。

cd /etc/yum.repos.d
mv ./CentOS-Base.repo ./CentOS-Base.repo.bak
mv ./epel-7.repo ./epel-7.repo.bak
wget http://mirrors.aliyun.com/repo/Centos-7.repo
wget https://mirrors.aliyun.com/repo/epel-7.repo
yum clean all
yum makecache
yum update

3.2 注意,后续需要用到gcc,我们使用devtoolset-4安装,但是有个坑,centos-release-scl镜像已经不提供devtoolset-4了,直接到7,需要执行如下命令。

wget https://copr.fedoraproject.org/coprs/hhorak/devtoolset-4-rebuild-bootstrap/repo/epel-7/hhorak-devtoolset-4-rebuild-bootstrap-epel-7.repo -O 
/etc/yum.repos.d/devtools-4.repo

yum install devtoolset-4-gcc devtoolset-4-binutils devtoolset-4-gcc-c++


执行完后用下面命令验证一下
scl enable devtoolset-4 bash

3.3 安装Postgre SQLdecocderbufs

https://www.kancloud.cn/datapipeline-group/v2_7_0/1475270

image-20220408194011145

在上图中,把四个软件在一个文件夹内解压缩。编译安装顺序为,

geos→proj→gdal→postgis,在执行postgis的.configure命令时,需要补充如下参数.

./configure  --prefix=/opt/pgsql/postgis --with-geosconfig=/opt/pgsql/geos/bin/geos-config --with-gdalconfig=/opt/pgsql/gdal/bin/

4.务必重启PGSQL

#停止命令
./pg_ctl stop -D ../../pgsql_data/

#启动命令
./pg_ctl start -D ../../pgsql_data/

标签:pgsql,Postgresql,FlinkCDC,devtoolset,repo,yum,版本,wget,archive
来源: https://www.cnblogs.com/traveller-hzq/p/16464490.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有