Centos7搭建分布式Postgresql集群(Citus MX)来处理地理数据(PostGIS)

本文的分布式Postgresql集群是通过citus扩展实现的,Citus是PostgreSQL的扩展(not a fork),采用shared nothing架构,节点之间无共享数据,由协调器节点和Work节点构成一个数据库集群。相比单机PostgreSQL,Citus可以使用更多的CPU核心,更多的内存数量,保存更多的数据。通过向集群添加节点,可以轻松的扩展数据库。
Citus支持新版本PostgreSQL的特性,并保持与现有工具的兼容 Citus使用分片和复制在多台机器上横向扩展PostgreSQL。它的查询引擎将在这些服务器上执行SQL进行并行化查询,以便在大型数据集上实现实时(不到一秒)的响应。
其实我了解到citus没几个月,当时因为程序不太支持Hive(后端的包没给对Hadoop的版本)就准备使用其他的数据库做数据仓库,几经抉择选中了Postgresql,而为了能支撑“大量”的数据就去找该数据库搭建集群的教程。
难受的是,Postgresql主从我几次折腾还是没能成功,虽然主从模式没有成功但功夫不负有心人让我找到了Citus。当时我只是基于测试的目的只在虚拟机上面搭建了一个简单的集群就搁置了,这不最近因为需要使用Postgis扩展来处理地理数据了,本来是打算使用OpenGauss搭建集群的,苦于arm架构下二进制包是openeuler系统的,暂时不得不使用Postgresql来解决问题了。

于是又只好对Citus进行一番测试了,苦于不能在实际的arm环境上面进行测试,下面的“教程”是在x86架构下进行的。。。。。。
继续阅读Centos7搭建分布式Postgresql集群(Citus MX)来处理地理数据(PostGIS)

危?网站好像被挂马了!


由于之前忘记把根域的调转到www忘记设置了,今天特意搜索了下site:cyzwb.com然后惊讶的发现貌似被挂码了的赶脚。只见原来正常的标题已经变成了恶意网站的垃圾标题,点击进去还是自己本体网站。点击查看快照发现是一片空白的页面,我一开始猜想可能和IP有关就换到服务器什么打开发现无法打开要把快照的地址改成https就能打开且是正常的快照。
心想不太对劲啊,于是在能打开但是是空白的快照页上面使用F12发现了一些端倪。
继续阅读危?网站好像被挂马了!

Centos7扩容根目录

貌似默认情况下Centos7给根目录分配的容量是50GB,在生产环境中太小了可能会出现一些奇奇怪怪的问题。在k8s中虽然已经将docker的目录挂载到数据盘了但是还是有些日志导致日常使用率超过80%,导致我要经常清理后来干脆搞个定时脚本清理了。。。
以前没得选,现在能让我选择得话我想给根目录分配大一点,可是还是不能如愿只能扩容了。
继续阅读Centos7扩容根目录

重新编译etcd以解决出现ETCD_UNSUPPORTED_ARCH警告

在github中的etcd已经有arm64的打包可供下载使用了,但是在使用时会有警告,就算是按照搜索到的设置了 export ETCD_UNSUPPORTED_ARCH=arm64 环境变量但是这不过是 running etcd on unsupported architecture arm64 since ETCD_UNSUPPORTED_ARCH is set 或者 etcd on unsupported platform without ETCD_UNSUPPORTED_ARCH=arm64 set 的区别而已。
直接执行etcd虽然会出现警告但是还是能运行起来可是使用service启动却会因为这个错误而不断重启。刚开始还在为难不知道要修改哪个文件时出现的一个提示让我快速的找到了文件。

继续阅读重新编译etcd以解决出现ETCD_UNSUPPORTED_ARCH警告