ICode9

精准搜索请尝试: 精确搜索
  • 二十九、clickhouse其他函数2022-04-29 15:32:29

      hostName   返回一个字符串,其中包含执行此函数的主机的名称。对于分布式处理,这是远程服务器主机的名称,如果该功能是在远程服务器上执行的。如果它在分布式表的上下文中执行,那么它会生成一个普通列,其中包含与每个分片相关的值。否则它会产生一个常数值。 SELECT hostName()

  • |NO.Z.00008|——————————|Deployment|——|Hadoop&OLAP数据库管理系统.v08|---------------------------------|ClickH2022-04-17 16:35:20

    [BigDataHadoop:Hadoop&OLAP数据库管理系统.V08]                           [Deployment.OLAP数据库管理系统][|ClickHouse:ClickHouse链接JDBC|]一、JDBC### --- ClickHouse链接JDBC ~~~ 允许CH通过 JDBC 连接到外部数据库。 ~~~ 要实现JDBC连接,CH需

  • |NO.Z.00007|——————————|Deployment|——|Hadoop&OLAP数据库管理系统.v07|---------------------------------|ClickH2022-04-17 16:35:01

    [BigDataHadoop:Hadoop&OLAP数据库管理系统.V07]                           [Deployment.OLAP数据库管理系统][|ClickHouse:ClickHouse链接kafka|]一、ClickHouse链接Kafka### --- ClickHouse链接Kafka:此引擎与 Apache Kafka 结合使用。 ~~~ # Kafka 特性:

  • |NO.Z.00041|——————————|BigDataEnd|——|Hadoop&OLAP_ClickHouse.V13|-----------------------------|ClickH2022-04-14 14:35:13

    [BigDataHadoop:Hadoop&OLAP_ClickHouse.V13]      [BigDataHadoop.ClickHouse_OLAP数据库管理系统][|附录一|Hadoop|ClickHouse|ClickHouse:ClickHouse语法&Where&GroupBy子句|]一、WHERE### --- where ~~~ WHERE 子句允许过滤从 FROM 子句 SELECT. ~~~ 如果有一个 WHE

  • |NO.Z.00044|——————————|BigDataEnd|——|Hadoop&OLAP_ClickHouse.V16|-----------------------------|ClickH2022-04-14 14:34:46

    [BigDataHadoop:Hadoop&OLAP_ClickHouse.V16]      [BigDataHadoop.ClickHouse_OLAP数据库管理系统][|附录一|Hadoop|ClickHouse|ClickHouse:ClickHouse语法&Distingct&Limit子句|]一、DISTINCT子句### --- Distingt子句 ~~~ 如果 SELECT DISTINCT 被声明,则查询结果中只保留

  • |NO.Z.00046|——————————|BigDataEnd|——|Hadoop&OLAP_ClickHouse.V18|-----------------------------|ClickH2022-04-14 14:34:04

    [BigDataHadoop:Hadoop&OLAP_ClickHouse.V18]      [BigDataHadoop.ClickHouse_OLAP数据库管理系统][|附录一|Hadoop|ClickHouse|ClickHouse:ClickHouse语法&Into Outfile&Format子句|]一、INTO OUTFILE 子句### --- Into Outfile子句 ~~~ 添加 INTO OUTFILE filename 子句(其

  • |NO.Z.00045|——————————|BigDataEnd|——|Hadoop&OLAP_ClickHouse.V17|-----------------------------|ClickH2022-04-14 14:33:52

    [BigDataHadoop:Hadoop&OLAP_ClickHouse.V17]      [BigDataHadoop.ClickHouse_OLAP数据库管理系统][|附录一|Hadoop|ClickHouse|ClickHouse:ClickHouse语法&UnionALL子句|]一、UNION ALL子句### --- 你可以使用 UNION ALL 结合任意数量的 SELECT 来扩展其结果。 示例: ~~~

  • clickhouse智能提示编辑器2022-04-10 20:00:05

    对于经常写sql的人来说智能提示是非常重要的,这个非常影响写sql的效率和心情。 这里说的智能提示不仅仅是关键字(select等)的智能提示,还得要做到表字段的智能提示。 例如: 下面是mysql的智能提示(是利用codemirror做的) image 上图是我很久以前搞的一个快速开发的后台系统中的一个小

  • clickhouse的分布式Distributed表引擎2022-04-06 15:01:50

      具有分布式引擎的表不存储自己的任何数据,但允许在多个服务器上进行分布式查询处理。读取是自动并行的。在读取期间,将使用远程服务器上的表索引(如果有的话)。 一、创建表  CREATE TABLE [IF NOT EXISTS] [db.]table_name [ON CLUSTER cluster] ( name1 [type1] [DEFAULT|

  • Clickhouse 读取Kafka数据写入表2022-04-02 09:32:07

    1、启动kafka和zookeeper 2、创建一个生产者 sh kafka2.6-start.sh producer demo 3、在ck中创建一个表 #创建一个流引擎 CREATE TABLE queue (create_time String, level UInt64, message String) ENGINE = Kafka('hadoop100:9092', 'demo', 'group1', 'CSV'

  • Clickhouse分桶聚合后填充零值问题2022-03-31 23:31:51

    select count(a) as acount, toStartOfInterval(timestamp, INTERVAL 1440 minute) as c_time from `fill_test` where b = 'hello' and timestamp >= '2022-01-01 00:00:00' and timestamp <= '2022-04-31 23:59:59' group by c_tim

  • ClickHouse-常用数据类型2022-03-31 22:02:48

    一、整型 固定长度的整型,包括有符号整型或无符号整型。 整型范围(-2n-1~2n-1-1): Int8 - [-128 : 127]:对应Java byte-8bit Int16 - [-32768 : 32767]:对应Java short-16bit Int32 - [-2147483648 : 2147483647]:对应Java int-32bit Int64 - [-9223372036854775808 : 922337203685477

  • signoz 开源apm 工具试用2022-03-31 21:03:58

    signoz 官方提供了demo ,我们基于docker 也可以快速的体验服务 参考架构 signoz 的架构还是比较简单的,利用了社区的标准(OpenTelemetry),同时集成了metrics 以及trace,类似的grafan tempo 也是一个全家桶的东西使用也比较简单     运行 注意对于docker-compose 启动的,官方的示例是需

  • Clickhouse上用Order By保证绝对正确结果但代价是性能2022-03-25 17:01:06

    一些聚合函数的结果跟流入数据的顺序有关,CH文档明确说明这样的函数的结果是不确定的。这是为什么呢?让我们用explain pipeline来一探究竟。 以一个很简单的查询为例: select any( step ) from events group by request_id; events表的定义如下: CREATE TABLE default.events ( `

  • clickhouse中update/delete的使用之mutation2022-03-25 10:31:51

      Clickhouse是个分析型数据库。这种场景下,数据一般是不变的,因此Clickhouse对update、delete的支持是比较弱的,实际上并不支持标准的update、delete操作。 1.Clickhouse通过alter方式实现更新、删除,它把update、delete操作叫做mutation(突变)。   语法为: ALTER TABLE [db.]t

  • lickhouse在各大厂商的应用2022-03-21 15:05:06

      案例-ClickHouse在头条的技术演进  

  • clickhouse概述2022-03-21 00:03:14

    前言 随着数据科技的进步,数据分析师早已不再满足于传统的T+1式报表或需要提前设置好维度与指标的OLAP查询。数据分析师更希望使用可以支持任意指标、任意维度并秒级给出反馈的大数据Ad-hoc查询系统。这对大数据技术来说是一项非常大的挑战,传统的大数据查询引擎根本无法做到这

  • ClickHouse读书笔记(三)—数据定义2022-03-08 15:36:11

    一、基础类型 1、数值类型 整型:Int8、Int16、Int32、Int64 无符号整型:UInt8、UInt16、UInt32、UInt64 浮点数:Float32(7位精度)、Float64(16位精度) 定点数:Decimal32、Decimal64、Decimal128三种精度,简写方式有Decimal32(S)、Decimal64(S)、Decimal128(S)。原生方式为Decimal(P,S)

  • ClickHouse读书笔记(一)—ClickHouse的前世今生2022-03-08 01:01:22

    第一章的内容是ClickHouse的诞生背景,相比其他数据库的优缺点。读此书时,我对一些数据库的概念没有认知,很容易被卡住,讲着讲着就不知道是在讲什么,特此,记录一些概念性的东西。 1、名词 BI系统:商业智能系统,Business Intelligence。 OLAP:联机分析处理,On-Line Analytical Processing。是

  • clickhouse探索2022-03-07 19:34:47

    踩坑 找不到/var/lib/clickhouse/status文件 新建一个即可 Setting max_server_memory_usage was set to 14.40 GiB (16.00 GiB available * 0.90 max_server_memory_usage_to_ram_ratio) Solution: ClickHouse is designed for RAM 32Gib+ 但是这里是因为我的config.xml和use

  • clickhouse处理超时问题2022-03-07 16:34:27

    以下设置可以调整users.xml参数,或者使用SQL-driven来管理用户权限,通过执行以下sql也可以达到同等效果。 一、HTTP协议(8123端口)   HTTP协议是ClickHouse在生产环境中最常使用的交互方式,包括官方提供的jdbc driver、阿里云DMS、DataGrip,后台使用的都是HTTP协议。HTTP协议常用的端

  • clickhouse集群搭建2022-03-04 18:33:26

    clickhouse集群搭建 搭建前准备配置好防火墙以及搭建好zookeeper,这里就不做搭建,可自行查找攻略首先取消打开文件数限制,然后重启不然不生效 [root@node02 ~]# vim /etc/security/limits.conf * soft nofile 65536 * hard nofile 65536 * soft nproc 131072 * hard nproc 131

  • flink写入clickhouse之分布式表写入2022-03-02 18:03:23

    flink写入clickhouse之分布式表写入.md 简介 之前基于clickhouse的官方jdbc包编写了sink,用于写入单表,见:https://www.cnblogs.com/sqhhh/p/15897275.html clickhouse分布式表的写入,目前有2种方法: 1.对着逻辑表写入:此方法可以当作是单表,利用单表写入的sink写入数据 2.对着各个节点

  • clickhouse支持udf,通过ambda表达式使用2022-02-28 14:34:25

    UDF用户可通过添加lambda表达式,创建自定义Function CREATE FUNCTION linear_equation AS (x, k, b) -> k*x + b; SELECT number, linear_equation(number, 2, 1) FROM numbers(3); SELECT number, linear_equation(number, 2, 1) FROM numbers(3) Query id: 9a4a2978

  • ClickHouse在大数据领域应用实践2022-02-25 09:31:08

    一、序言 面向大数据量查询数据库,优点是在较大数据量(千万级)的前提下具有较好的查询性能。 1、应用场景 ClickHouse应用于OLAP(在线分析处理)领域,具体来说满足如下特点使用此技术比较合适: 事务型数据库表通过连表查询转换成宽表 聚合(统计)计算使用较多 对查询效率要求较高,有限时间范

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有