GreenPlum的那些事《五》——浅谈GPDB中的资源队列 资源队列介绍当你安装好数据库的时候就会有一个默认的资源队列 pg_default,所有用户默认使用该队列。GPDB建议你对不同类型的用户建立不同的资源队列,比如你有超级用户,WEB查询用户,报表用户还有个人用户等,你就需要根据用户使用场景和需求的不同,创建不同的资源队列进行分配。资源队列主要做了以下工作: 查询数。对用户最大查询的并发数进行控制。 内存。对用户查询需要的内存资源进行控制。 2019-02-24 greenplum
GreenPlum的那些事《四》——增删改查 上文我们介绍了GPDB的常用管理操作,今天我们来说下它的增删改查。这是对于一个数据库最基本的功能了,然而GPDB有它自己的特性,我们一起来看下。 插入数据按列插入数据: gptest=# create table products (name varchar(20),price numeric(10,2),product_no bigint) distributed by (product 2019-01-24 greenplum
GreenPlum的那些事《三》——常用操作 我们前面已经说了,GPDB是一个列式数据库,数据库都有什么特性呢?都能做什么呢?熟悉MySQL,Oracle的同学可能就比较清楚关系型数据库的管理,下面我们就来说下GPDB的一些管理和常用操作。 数据库常用操作分为:创建数据库、创建schema、创建资源池、创建角色、创建用户、创建表。下面我们一一来说下GPDB这些常用操作,和关系型数据库MYSQL有什么不同呢? 创建数据库 gp_sydb= 2019-01-23 greenplum
GreenPlum的那些事《二》——GreenPlun启动报错 在配置好GreenPlum过程中,需要注意一下几点: 找好安装包 安装依赖,Gun版本需要注意 详细安装步骤参考Greenplum安装介绍 自己是电脑虚拟机安装的中间出现很多报错,度娘加经验解决。最后启动还是报错,发现是资源不足,所以关闭了mirror,减少了segment。然后启动还是报错: > > 20190122:20:23:14:003437 gpstart 2019-01-22 GreenPlum
GreenPlum的那些事《一》——GreenPlum数据库介绍 1. 数据存储行式数据库是按照行存储的,行存储就是各行放入连续的物理位置,就行我们平时写字一样,一行一行的写,读取的时候也是一行一行的读取。像SQL server,Oracle,mysql等传统的关系型数据库都属于行式数据库范畴。列式数据库是按照列存储的,列存储是把多行数据的每一列按照列存储在磁盘,就像一把数据写入excel表格中,每次按照列读取数据,像Vertica,GreenPlum,HB 2019-01-22
Vertica的这些事(十七)——Vertica消费kafka答疑 关于如何消费kafka数据,请参看Vertica的这些事(十四)——Vertica实时消费kafka实现最近有小伙伴提出了消费kafka的一些疑问,答疑如下: #####1、 Vertica消费kafka机制是什么? Vertica通过scheduler来按定义的频度调度执行copy table from kafkasource(…)来从kafka的主题加载数据。 #####2、 2018-11-20 vertica
Vertica的这些事(十六)——Vertica如何建表 大家看到题目可能会想,建表谁不会呀,还用讲嘛?但是如何建表能使你的应用查询更加快呢? ####Anatomy of a ProjectionThe [CREATE PROJECTION]statement defines the individual elements of a projection, as the following graphic shows.The previous exa 2018-11-20 vertica
Vertica的这些事(十五)——Vertica报错TM 最近在用Vertica的时候碰到一个问题,Vertica在运行了一段时间后总是出现类似下面的错误12java.sql.SQLException: [Vertica][VJDBC](5065) ERROR: Too many ROS containers exist for the following projections:<projection> (limit = 18078, R 2018-11-20 vertica
Flink的这些事(二)——Flink开发环境搭建 #IEDA开发环境 ###1、安装java环境参考上一篇文章Flink的这些事(一)——Flink部署 ###2、安装maven参考博客Maven安装与配置 ###3、配置IDEA参考博客如何使用IntelliJ IDEA 配置Maven ###4、pom文件设置123456789101112131415161718192021222324252627282930313233343536373 2018-11-10 Flink
Flink的这些事(一)——Flink部署 一、flink介绍Apache Flink 是一个开源的分布式流处理和批处理系统。Flink 的核心是在数据流上提供数据分发、通信、具备容错的分布式计算。同时,Flink 在流处理引擎上构建了批处理引擎,原生支持了迭代计算、内存管理和程序优化。 二、部署环境操作系统环境: flink支持Linux, Mac OS X, 和 Windows环境部署,本次部署选择Linux环境部署。 JDK:要求 2018-11-09 Flink