如何从clickhouse中的json中提取json？

文章/答案/技术大牛

发布

2回答

clickhouse

我有一个json在我的基础上：我需要获取每个键的所有唯一值，但我在提取键'd‘和键'e’的值时遇到了一些问题。如何解决这个问题？

浏览 109提问于2019-11-12得票数 3

回答已采纳

1回答

Clickhouse将json数据插入字符串列

python、postgresql、clickhouse

我们需要将数据从postgres插入到clickhouse。postgres中的一个字段具有json类型。在clickhouse中，该字段具有Nullable(String)类型。对于插入数据，我们使用气流ClickHouse插件 clickhouse_hook.run(sql="INSERT INTO "+ self.

浏览 6提问于2020-11-06得票数 0

1回答

Gorm:带有数组列的批量插入到ClickHouse中

go、clickhouse、go-gorm

我想将数据批量插入到我们的ClickHouse数据库中.使用gorm，我可以很容易地使用 field1 string `json:"field1"`,} 但是，如果audit包含如下的数组字段，则其他字段的数据仍将保存在数据库<

浏览 6提问于2022-01-20得票数 0

回答已采纳

2回答

ClickHouse:如何正确地存储JSON数据？

sql、clickhouse、yandex、yandex-metrika

我将把数据从PostgreSQL数据库迁移到Yandex的ClickHouse。源表中的一个字段是名为additional_data的JSON类型。因此，PostgreSQL允许在使用->>和->等进行SELECT ...查询时访问json属性。我需要相同的行为将持久化到我的结果表中的ClickHouse存储中。(即在选择查询

浏览 13提问于2020-09-30得票数 8

回答已采纳

1回答

clickhouse备份命令的身份验证

clickhouse、clickhouse-backup

我有一个运行的clickhouse实例，其中我已经安装了clickhouse-备份。我已经连接到它，并且没有遇到像这样的自定义用户运行clickhouse客户机的问题：但是当我做clickhouse-backuptables的时候 can't connect to clickhouse: code: 516, messa

浏览 7提问于2021-01-25得票数 1

回答已采纳

1回答

CH位于双xxx 14核@ 2.4 GHz、56 vCPU和256 56 mem的服务器中。并在1小时10分钟内插入1B行。5秒从“顶部”。21.2.2.8Engine:缓冲区(MergeTree)默认配置；w/o缓冲区在json中执行10%的lessdataset：，2608 B/行，每插入150个列：500 k行，即由20个带有clickhouse如果没有，如何改进？可以在一个服务器中拥有多个CH服务器实例吗？

浏览 2提问于2021-05-10得票数 0

3回答

如何在Clickhouse驱动程序中使用JSON格式获取数据

python、clickhouse

我正在尝试在Django项目中获取我的Clickhouse数据。我正在使用clickhouse_driver，并且：当我在Clickhouse服务器SELECT * FROM myTable LIMIT 5 FORMAT JSON中执行这个命令时，它以JSON格式输出。但是在python中，当我

浏览 6提问于2020-08-04得票数 3

回答已采纳

2回答

在Clickhouse中控制字符串取消转义？

clickhouse

我正在尝试将JSON数据从Kafka加载到Clickhouse，在Clickhouse中，JSON包含一些转义序列。│似乎在调用JSONExtractRaw之前，输入字符串是未转义的，这会产生无效的JSON。在这个最小的例子中，不转义似乎是可重现的： :

浏览 1提问于2020-03-13得票数 2

1回答

Clickhouse为json数据创建数据库结构

clickhouse

新加入clickhouse，并固定在用于导入json数据的数据库创建结构上，json数据是嵌套的。例如，如下所示的json数据"FirewallMatchesActions": [ ], "1234abc",

浏览 0提问于2020-06-12得票数 0

回答已采纳

1回答

为日志引擎启用system.columns

clickhouse

有没有办法在Clickhouse中获取使用日志引擎创建的表的表或列大小？我知道可以使用system.columns表查询MergeTree引擎列的大小信息。────────────────┴───────────────────┴────────────────────┴───────────────────┘ 我搜索了很多，但找不到为日志引擎启用此功能的配置如果不可能，给出计数和列类型的粗略估计是什么？或者，既然Clickhouse压缩了数据，那么尝

浏览 0提问于2020-02-03得票数 0

2回答

在Clickhouse v22.3中使用非结构化JSON列

json、blob、clickhouse

我正在为Clickhouse使用新的JSON列，它是在版本22.3中添加的。在Clickhouse网站上有一篇很棒的关于它的博客文章- -- W

浏览 30提问于2022-05-14得票数 1

回答已采纳

3回答

如何通过HTTP接口从文件中向Clickhouse插入数据？

docker、clickhouse

我想从文件中向每个ClickHouse接口插入数据。CSV，JSON，TabSeparated，这不重要。例如，使用Docker-容器： docker run -it --rm --link some-clickhouse-server:clickhouse-server yandex/cl

浏览 4提问于2018-08-24得票数 3

2回答

从Clickhouse中的JSON列中提取所有可能的密钥

json、clickhouse

我在Clickhouse有一张有properties列的桌子。该列是一个JSON类型列，并存储一个带有多个键和值的对象。没有数组，只有一个具有多个键和值的对象。我要做的是构建列中所有唯一键名的列表。{ age: '25'}{ genre: 'pop'} 我想检索age和genre作为这个查询的结果。

浏览 4提问于2022-07-01得票数 0

回答已采纳

1回答

如何在Clickhouse* SQL查询中添加注释*

clickhouse

我遇到了一件奇怪的事，想知道你是如何处理的。我使用摩纳哥编辑器编写sql查询，然后使用节点clickhouse库运行查询，因此，在编辑器中，用户输入以下内容：select * from table 1-- Explain\nselect * from table 1:"SyntaxError: Unexpected number in JSON</em

浏览 12提问于2022-04-14得票数 0

2回答

将具有动态变化模式的事件数据流式传输到ClickHouse

clickhouse

我正在评估Clickhouse用于存储具有可变事件模式的流事件。事件模式是嵌套的JSON。新属性可能具有不同的数据类型，因此我们不能创建规范化的键值对。根据文档，每当模式发生更改时，我们都必须显式地更改表的模式，然后插入新记录。由于插入操作是从多个源工作进程进行的，因此添加'IF NOT EXISTS‘子句可以帮助最小化竞争条件。有没有人能告诉我们，有没有更好的方法将动态变化的模式插入到<

浏览 34提问于2019-10-11得票数 2

回答已采纳

1回答

用ClickHouse消费卡夫卡的嵌套JSON消息

json、apache-kafka、clickhouse

如果是平面JSON文档，Clickhouse肯定可以从Kafka读取JSON消息。CREATE TABLE topic1_kafka ts Int64, title String, msg但是并不是所有的生产者都发送平面JSON，大多数应用程序生成嵌套

浏览 8提问于2020-08-21得票数 7

1回答

Clickhouse: kafka坏消息错误处理

apache-kafka、error-handling、clickhouse

Clickhouse版本21.12.3.32。我m following this PR([https://github.com/ClickHouse/ClickHouse/pull/21850](https://github.com/ClickHouseI发现，如果单个消息包含损坏的数据，则无法解析整批接收到的消息，并可能导致数据丢失。：[object Object] 第一个消息错误：JSO

浏览 43提问于2022-03-16得票数 0

回答已采纳

1回答

Clickhouse异常:超出内存限制(总计)：28.13 GiB (尝试分配4543835字节的块)

java、clickhouse

我在clickhouse数据库中创建了一个带有以下查询的表：I从卡夫卡用户那里获取数据，并解析JSON构建一个查询数组长度的变化而变化，可能是更大的插入查询。在运行4天的</em

浏览 3提问于2021-05-17得票数 0

1回答

Clickhouse中的物化视图未填充

apache-kafka、clickhouse

我目前正在从事一个项目，该项目需要从Kafka主题(JSON格式)中摄取数据，并将其直接写入Clickhouse。我遵循了中建议的方法问题2:是否有一种方法可以多次从引擎“1级”读取相同的数据？问题3:是否有办法在阅读卡夫卡主题时将Avro转换为JSON？或者Clickhouse</em

浏览 2提问于2018-07-20得票数 2

回答已采纳

2回答

ClickHouse卡夫卡引擎可以使用压缩的JSON消息吗？

json、apache-kafka、clickhouse

ClickHouse卡夫卡引擎可以使用JSONEachRow格式使用来自JSONEachRow主题的压缩JSON消息吗？它会自动解压缩消息，然后应用JSON解析吗？它需要什么特殊的配置吗？编辑我的问题是通过设置压缩配置压缩主题是否会使ClickHouse无法读取这些消息。

浏览 2提问于2018-11-22得票数 1

回答已采纳

点击加载更多