Hawq安装搭建

2024-02-22 22:58
文章标签 安装 搭建 hawq

本文主要是介绍Hawq安装搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

环境列表

操作系统:centos 7 64位

Hawq版本:git clonehttps://git-wip-us.apache.org/repos/asf/incubator-hawq.git

虚拟机主机列表

主机名

Ip

hawq1

192.168.204.201

hawq2

192.168.204.202

hawq3

192.168.204.203

参考资料:https://cwiki.apache.org/confluence/display/HAWQ/Build+and+Install

一hawq编译安装(root用户操作hawq1, 192.168.204.201)

1操作系统环境准备

安装centos7,设置主机名,关闭防火墙,关闭selinux

chkconfig iptables off

chkconfig ip6tables off

systemctl stop firewalld.service

sestatus  //查询

vi  /etc/selinux/config  //关闭selinux

2软件环境准备

curl -L"https://bintray.com/wangzw/rpm/rpm" -o/etc/yum.repos.d/bintray-wangzw-rpm.repo

yum install -y epel-release

yum makecache

yum install -y man passwd sudo tar whichgit mlocate links make bzip2 net-tools \

 autoconf automake libtool m4 gcc gcc-c++ gdb bison flex cmake gperfmaven indent \

 libuuid-devel krb5-devel libgsasl-devel expat-devel libxml2-devel \

 perl-ExtUtils-Embed pam-devel python-devel libcurl-devel snappy-devel \

 thrift-devel libyaml-devel libevent-devel bzip2-devel openssl-devel \

 openldap-devel protobuf-devel readline-devel net-snmp-devel apr-devel \

 libesmtp-devel xerces-c-devel python-pip json-c-devel libhdfs3-devel \

 apache-ivy java-1.7.0-openjdk-devel \

 openssh-clients openssh-server

yum install -y postgresql-devel

pip --retries=50 --timeout=300 installpg8000 simplejson unittest2 pycrypto pygresql pyyaml lockfile paramiko psi

pip --retries=50 --timeout=300 installhttp://darcs.idyll.org/~t/projects/figleaf-0.6.1.tar.gz

pip --retries=50 --timeout=300 installhttp://sourceforge.net/projects/pychecker/files/pychecker/0.8.19/pychecker-0.8.19.tar.gz/download

yum erase -y postgresql postgresql-libspostgresql-devel

 

碰到问题:

Transaction check error:

 file /usr/lib/systemd/system/blk-availability.service from install ofdevice-mapper-7:1.02.107-5.el7.x86_64 conflicts with file from packagelvm2-7:2.02.105-14.el7.x86_64

 file /usr/sbin/blkdeactivate from install ofdevice-mapper-7:1.02.107-5.el7.x86_64 conflicts with file from packagelvm2-7:2.02.105-14.el7.x86_64

 file /usr/share/man/man8/blkdeactivate.8.gz from install ofdevice-mapper-7:1.02.107-5.el7.x86_64 conflicts with file from packagelvm2-7:2.02.105-14.el7.x86_64

rpm -qa | grep lvm2

yum erase lvm2-2.02.105-14.el7.x86_64


3下载incubator-hawq

git clonehttps://git-wip-us.apache.org/repos/asf/incubator-hawq.git

4安装libyarn

cd depends/libyarn/

mkdir build

cd build

../bootstrap --prefix=/usr/local/

make

sudo make install

把结果*.so文件复制至/usr/lib或者如下操作

ln -s /usr/local/libyarn.so  /usr/lib

ln -s /usr/local/libyarn.so.1  /usr/lib

ln -s /usr/local/libyarn.so.0.1.10  /usr/lib

ldconfig

5配置及编译hawq(注意保持网络通畅)

./configure --prefix=/hawq

make

make install

二虚拟机制作

第一部分操作完成后,保存虚拟机hawq1,然后copy成2份,然后分别打开虚拟机根据虚拟机主机列表更改主机名,IP等操作,然后互ping IP,确认虚机机之间网络通畅。

三hadoop 2.X系统安装配置(可以利用gpssh设置互信等),然后启动运行,

hadoop 2.X系统安装配置参考:http://blog.csdn.net/sunziyue/article/details/50735192

之后再配置好hawq软件中相关配置文件(hawq用户操作)。

四初始化hawq实例(hawq用户操作)

source /install/dir/greenplum_path.sh

hawq init cluster

hawq stop/restart/start cluster

这篇关于Hawq安装搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/736753

相关文章

利用Python快速搭建Markdown笔记发布系统

《利用Python快速搭建Markdown笔记发布系统》这篇文章主要为大家详细介绍了使用Python生态的成熟工具,在30分钟内搭建一个支持Markdown渲染、分类标签、全文搜索的私有化知识发布系统... 目录引言:为什么要自建知识博客一、技术选型:极简主义开发栈二、系统架构设计三、核心代码实现(分步解析

如何解决mmcv无法安装或安装之后报错问题

《如何解决mmcv无法安装或安装之后报错问题》:本文主要介绍如何解决mmcv无法安装或安装之后报错问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录mmcv无法安装或安装之后报错问题1.当我们运行YOwww.chinasem.cnLO时遇到2.找到下图所示这里3.

Python 安装和配置flask, flask_cors的图文教程

《Python安装和配置flask,flask_cors的图文教程》:本文主要介绍Python安装和配置flask,flask_cors的图文教程,本文通过图文并茂的形式给大家介绍的非常详细,... 目录一.python安装:二,配置环境变量,三:检查Python安装和环境变量,四:安装flask和flas

Win11安装PostgreSQL数据库的两种方式详细步骤

《Win11安装PostgreSQL数据库的两种方式详细步骤》PostgreSQL是备受业界青睐的关系型数据库,尤其是在地理空间和移动领域,:本文主要介绍Win11安装PostgreSQL数据库的... 目录一、exe文件安装 (推荐)下载安装包1. 选择操作系统2. 跳转到EDB(PostgreSQL 的

使用Python实现快速搭建本地HTTP服务器

《使用Python实现快速搭建本地HTTP服务器》:本文主要介绍如何使用Python快速搭建本地HTTP服务器,轻松实现一键HTTP文件共享,同时结合二维码技术,让访问更简单,感兴趣的小伙伴可以了... 目录1. 概述2. 快速搭建 HTTP 文件共享服务2.1 核心思路2.2 代码实现2.3 代码解读3.

Linux系统中卸载与安装JDK的详细教程

《Linux系统中卸载与安装JDK的详细教程》本文详细介绍了如何在Linux系统中通过Xshell和Xftp工具连接与传输文件,然后进行JDK的安装与卸载,安装步骤包括连接Linux、传输JDK安装包... 目录1、卸载1.1 linux删除自带的JDK1.2 Linux上卸载自己安装的JDK2、安装2.1

MySQL双主搭建+keepalived高可用的实现

《MySQL双主搭建+keepalived高可用的实现》本文主要介绍了MySQL双主搭建+keepalived高可用的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,... 目录一、测试环境准备二、主从搭建1.创建复制用户2.创建复制关系3.开启复制,确认复制是否成功4.同

Linux卸载自带jdk并安装新jdk版本的图文教程

《Linux卸载自带jdk并安装新jdk版本的图文教程》在Linux系统中,有时需要卸载预装的OpenJDK并安装特定版本的JDK,例如JDK1.8,所以本文给大家详细介绍了Linux卸载自带jdk并... 目录Ⅰ、卸载自带jdkⅡ、安装新版jdkⅠ、卸载自带jdk1、输入命令查看旧jdkrpm -qa

MySQL Workbench 安装教程(保姆级)

《MySQLWorkbench安装教程(保姆级)》MySQLWorkbench是一款强大的数据库设计和管理工具,本文主要介绍了MySQLWorkbench安装教程,文中通过图文介绍的非常详细,对大... 目录前言:详细步骤:一、检查安装的数据库版本二、在官网下载对应的mysql Workbench版本,要是

Linux安装MySQL的教程

《Linux安装MySQL的教程》:本文主要介绍Linux安装MySQL的教程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录linux安装mysql1.Mysql官网2.我的存放路径3.解压mysql文件到当前目录4.重命名一下5.创建mysql用户组和用户并修