百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

「实战」开年第一篇,从「Greenplum 6.0」1分钟安装尝鲜开始

nanshan 2025-03-30 19:21 12 浏览 0 评论


Greenplum 目前6版本目前已经迭代了几个小版本了,随着版本的更新,不断的有bug被修复。

打算试用的朋友可以入手了。作为开年的第一个工作日的第一个帖子,必须从“开天辟地”的6.0开始。以下内容较简略,适合稍微有基础的朋友,不适合作为安装部署圣经(这类帖子在网上肯定已经很多了,自行谷歌即可)。

目前 Pivotal 官方已经不再提供臃肿的bin安装包,而是通过对RedHat系/Debian系更加友好的方式发布,从官方下载到试用版本后(商用需要授权)直接执行安装。

安装方式1: yum

官方推荐采用 yum 的方式进行安装,yum 安装的好处是,会自动帮我们下载安装依赖包,将 greenplum 软件安装到 /usr/local 目录下,并创建软连接。但是如果不能自动联网下载就会比较麻烦。执行命令如下:

yum install ./greenplum-db-6.0.0-rhel7-x86_64.rpm

安装方式2: rpm

如果不能联网 yum 安装,可以先用 rpm 命令安装部分依赖包,然后再安装 Greenplum。下面展开内容主要通过 rpm 的方式浏览安装的整个过程。

[gpadmin6@gp1 ~]$ rpm -ivh greenplum-db-6.0.0-rhel7-x86_64.rpm
错误:依赖检测失败:
	apr 被 greenplum-db-6.0.0-1.el7.x86_64 需要
	apr-util 被 greenplum-db-6.0.0-1.el7.x86_64 需要
	bzip2 被 greenplum-db-6.0.0-1.el7.x86_64 需要
	krb5-devel 被 greenplum-db-6.0.0-1.el7.x86_64 需要
	libevent 被 greenplum-db-6.0.0-1.el7.x86_64 需要
	libyaml 被 greenplum-db-6.0.0-1.el7.x86_64 需要
	rsync 被 greenplum-db-6.0.0-1.el7.x86_64 需要

执行后发现,rpm 包自动检测软件依赖并提示,话不多说,自行 yum 安装对应的安装包即可,如果是内网环境,可以从iso或者 findrpm 等网站上找到对应的 rpm 包手工安装。

更新依赖包后继续尝试安装

[gpadmin6@gp1 ~]$ rpm -ivh greenplum-db-6.0.0-rhel7-x86_64.rpm
错误:can't create 事务 lock on /var/lib/rpm/.rpm.lock (权限不够)

报错了啊,怎么回事??因为权限不够哈哈,大家可能已经发现,我是用 gpadmin6 用户安装的,此时有2种解决方法:

  1. 直接用 root 安装
  2. 给 gpadmin6 sudo 权限

当然生产上还是建议采用第二种,毕竟 root 权限太危险了。

切换到 root 用户继续尝试安装

[root@gp1 gpadmin6]# rpm -ivh greenplum-db-6.0.0-rhel7-x86_64.rpm
准备中...                          ################################# [100%]
正在升级/安装...
   1:greenplum-db-6.0.0-1.el7         ###############                   ( 46%)

我手速没那么快,不能截取100%的安装状态,请不要挑刺了,只要几秒钟,软件安装成功。默认安装到 /usr/local/ 目录下。

将软件赋权给实际管理员用户

因为上面使用 root 用户安装的,所以真正要使用 gpadmin6 作为管理员用户,那么需要将软件的所属权限赋予 gpadmin6。如果是采用 gpadmin6 直接安装的,那就不需要多此一举喽。

[root@gp1 gpadmin6]# ls -al /usr/local
总用量 0
drwxr-xr-x. 13 root root 177 9月   5 19:26 .
drwxr-xr-x. 13 root root 155 9月   1 21:55 ..
drwxr-xr-x.  2 root root   6 4月  11 2018 bin
drwxr-xr-x.  2 root root   6 4月  11 2018 etc
drwxr-xr-x.  2 root root   6 4月  11 2018 games
lrwxrwxrwx   1 root root  29 1月   2 19:26 greenplum-db -> /usr/local/greenplum-db-6.0.0
drwxr-xr-x  11 root root 187 1月   2 19:26 greenplum-db-6.0.0
[root@gp1 gpadmin6]# chown -Rf gpadmin6:gpadmin /usr/local/greenplum-db*
[root@gp1 gpadmin6]# ls -al /usr/local
总用量 0
drwxr-xr-x. 13 root     root    177 9月   5 19:26 .
drwxr-xr-x. 13 root     root    155 9月   1 21:55 ..
drwxr-xr-x.  2 root     root      6 4月  11 2018 bin
drwxr-xr-x.  2 root     root      6 4月  11 2018 etc
drwxr-xr-x.  2 root     root      6 4月  11 2018 games
lrwxrwxrwx   1 gpadmin6 gpadmin  29 1月   2 19:26 greenplum-db -> /usr/local/greenplum-db-6.0.0
drwxr-xr-x  11 gpadmin6 gpadmin 187 1月   2 19:26 greenplum-db-6.0.0

设置 gpadmin6 用户环境变量

[gpadmin6@gp1 ~]$ cat .bashrc
# .bashrc

# Source global definitions
if [ -f /etc/bashrc ]; then
	. /etc/bashrc
fi

# Uncomment the following line if you don't like systemctl's auto-paging feature:
# export SYSTEMD_PAGER=

# User specific aliases and functions

source /usr/local/greenplum-db/greenplum_path.sh

这个环境变量主要是用来生效管理命令的,其他的环境变量暂时还没配置。

SSH 互信设置

[gpadmin6@gp1 ~]$ gpssh-exkeys -h gp1
[STEP 1 of 5] create local ID and authorize on local host

[STEP 2 of 5] keyscan all hosts and update known_hosts file

[STEP 3 of 5] retrieving credentials from remote hosts

[STEP 4 of 5] determine common authentication file content

[STEP 5 of 5] copy authentication files to all remote hosts

[INFO] completed successfully

用过的人都懂,不设置互信拉集群的时候可能会比较麻烦哦。

创建数据目录

集群初始化的时候不会自动创建目录的,需要手工创建好。

[root@gp1 gpadmin6]# mkdir -p /gpdata/primary
[root@gp1 gpadmin6]# mkdir -p /gpdata/master
[root@gp1 gpadmin6]# chown -Rf gpadmin6:gpadmin /gpdata

配置初始化文件

这里主要关注 master 和 segment 的目录,主机名和数据库端口号配置即可,其他的也可以忽略。

[gpadmin6@gp1 ~]$ cp /usr/local/greenplum-db/docs/cli_help/gpconfigs/gpinitsystem_config ~
[gpadmin6@gp1 ~]$ vim gpinitsystem_config
[gpadmin6@gp1 ~]$ cat gpinitsystem_config
# FILE NAME: gpinitsystem_config

# Configuration file needed by the gpinitsystem

################################################
#### REQUIRED PARAMETERS
################################################

#### Name of this Greenplum system enclosed in quotes.
ARRAY_NAME="Greenplum Data Platform"

#### Naming convention for utility-generated data directories.
SEG_PREFIX=gpseg

#### Base number by which primary segment port numbers
#### are calculated.
PORT_BASE=6000

#### File system location(s) where primary segment data directories
#### will be created. The number of locations in the list dictate
#### the number of primary segments that will get created per
#### physical host (if multiple addresses for a host are listed in
#### the hostfile, the number of segments will be spread evenly across
#### the specified interface addresses).
declare -a DATA_DIRECTORY=(/gpdata/primary /gpdata/primary)

#### OS-configured hostname or IP address of the master host.
MASTER_HOSTNAME=gp1

#### File system location where the master data directory
#### will be created.
MASTER_DIRECTORY=/gpdata/master

#### Port number for the master instance.
MASTER_PORT=5432

初始化数据库

下面开始初始化数据库了,细节忽略(没意义),hostfile文件中只有一个主机名gp1。

[gpadmin6@gp1 ~]$ gpinitsystem -c gpinitsystem_config -h hostfile

最后登录尝鲜

[gpadmin6@gp1 ~]$ psql -d postgres
psql (9.4.24)
Type "help" for help.

postgres=# create table t1(id serial, name varchar(10)) distributed replicated;
CREATE TABLE
                                            ^
postgres=# insert into t1(name) values('chris'),('yuan'),('jenny');
INSERT 0 3
postgres=# select * from t1;
 id | name
----+-------
  1 | chris
  2 | yuan
  3 | jenny
(3 rows)

postgres=# \q
[gpadmin6@gp1 ~]$

复盘分享

  • 6.0 安装明显比之前安装起来更舒服更方便了,熟练工基本1分钟就能完成单机测试环境安装;
  • 安装之前会检测一些依赖软件,不至于在安装过程中报错重新去查漏补缺;
  • 数据目录还是需要自己处理,要是数据目录也能自动创建就好了(目前机制可能更注重数据的保护,方式误操作磁盘导致机器上其他数据异常丢失?)
  • 目前 Greenplum 6.0 版本已经 merge 到 PostgreSQL 9.4 了。

相关推荐

安全软件更新:OpenSSH 9.3和OpenSSL 3.1

最近开源安全软件领域也相继更新了最新版本。其中上周OpenSSL发布了最新的3.1版本,而OpenSSH则在昨天发布最新版本9.3。虽然带来的新功能不多,只是bug和漏洞方面的修复,但是作为比较重要的...

阿里云新增的轻量应用服务器(欧洲与美洲)美国(硅谷)配置方法

近期,阿里云的轻量应用服务器新增了欧洲与美洲地域,可以在美国(硅谷)部署服务器了,但是没有LAMP应用镜像,所以在配置服务器时遇到几个问题,SSH登录不了,提示【Algorithmnegotiati...

OpenSSH 10.0发布 旨在更好地抵御量子计算机的攻击

OpenSSH10.0现已支持这一广泛使用的SSH客户端/服务器实现。OpenSSH10.0包含多项改进,包括更好地防御未来量子计算机可能发起的攻击。OpenSSH10.0放弃了对过去...

腾讯云国际站: 腾讯云服务器怎麽SSH远程连接

本文由【云老大】TG@yunlaoda360撰写准备工作获取服务器的公网IP地址:在腾讯云控制台找到云服务器实例,查看其基本信息,获取公网IP地址。确保服务器已安装SSH服务:一般Linux系统默...

旧电脑改服务器,这 6 个坑能让你白忙 3 天(附实测解决办法)

前几天收到粉丝私信,说照着教程把旧电脑改成服务器,结果折腾了3天还是没成功——要么是启动后连不上网,要么是跑两天就自动关机。其实我第一次改的时候也踩了不少坑,光是让旧电脑稳定运行,就重装了6...

使用win10自带的ssh服务器

我太喜欢ssh了,因为它的功能实在太强大,而且几乎不占用啥资源。(PS:类似的软件:p7zip,tightvnc)。因此,无论是哪个系统,我总想着安装一个ssh的服务器。之前我在虚拟机中安装了个win...

Python sys模块使用教程

1.知识导图2.sys模块概述2.1模块定义与作用sys模块是Python标准库中的一个内置模块,提供了与Python解释器及其环境交互的接口。它包含了许多与系统相关的变量和函数,可以用来控制P...

满足AI时代高效办公需求 惠普战99 AI商务超能本评测

身处智能化时代的浪潮之中,人工智能正在深刻影响着我们工作和生活的方式,从聊天机器人到自动驾驶,从智能制造到药物研发,人工智能的力量无处不在。如今,随着各类AI应用逐渐占据主流计算平台,并在各种触手可及...

使用 vLLM 生产环境部署 DeepSeek,算力减半、吞吐增十倍!

需求:之前使用Ollama部署过deepseek-r1:32b模型,非常方便快捷,适合个人快速部署使用。如果作为企业生产环境应该使用什么方式部署呢?一般都采用vllm、sglang进行部署...

我把 ML 模型编译成 C 后,速度竟提升了 1000 倍!

【CSDN编者按】在本文中,我们来尝试将micrograd神经网络编译成C。具体内容如下:简单了解一下神经网络;看看micrograd如何前向传播和反向传播;复习链式法则;分析为什么mi...

这才是真·非公旗舰!索泰RTX 5080天启OC显卡评测

近年来,电脑硬件的RGB灯光逐渐成为标配,厂商在产品差异化这一方面则开拓了二次元IP形象这一新的领域,但要说哪家厂商在这一领域最吸引眼球,我想索泰应该要属独领风骚的一个。早在2020年,索泰便推出了以...

性能测试工具Iperf 验证SDN网络

1实验目的掌握Iperf在Linux环境下的安装和常用命令行参数的含义熟悉Iperf应用实例掌握SDN网络中使用Iperf测试网络带宽等2实验原理网络性能测试主要是监测网络带宽的使用率,将网络带宽...

方案 | 感受沉浸式音效的魅力:Roger和他的豪华影院

随着沉浸式音效的不断普及,诸如杜比全景声、DTS:X或Auro3D等技术不断引入到家庭影院音响系统中来,并带来了前所未有的震撼效果。也因此,越来越多的业主想要搭建一间具备沉浸式音效的影院,以享受更高...

LLVM IR入门:编写自定义优化Pass的完整教程与性能影响分析

LLVMIR:编译器优化的核心纽带LLVM作为模块化编译器框架的典范,其中间表示(IR)是连接前端(如Clang)与后端(目标架构代码生成)的桥梁。与传统编译器不同,LLVMIR具有平台无关性和...

iperf-LINUX测速工具

#iperf-测速工具安装包下载地址https://github.com/esnet/iperfhttps://downloads.es.net/pub/iperf/iperf-3.9.tar.gz官...

取消回复欢迎 发表评论: