出于测试目的，我必须将数据从Clickhouse服务器推送到Kafka。我已经尝试过使用Confluent JDBC连接器，但效果不是很好。
看起来Clickhouse- Kafka -Engine只在Kafka -> Clickhouse方向上工作，所以Clickhouse-server作为消费者工作。
在Clickhouse中使用Table作为生产者有没有一个方便的方法，或者我有没有自己写生产者？
浏览 3提问于2018-12-30得票数 1
我是clickhouse的新手。
因为我的hadoop使用端口9000，所以与clickhouse的默认端口发生冲突。
下面是修改端口的步骤：
1 1sudo gedit /etc/clickhouse-server/config.xml将所有9000更改为9500
2 2sudo服务clickhouse-服务器重新启动
3 3clickhouse client -u默认设置--密码
连接到本地主机:9000作为用户默认值。代码: 210。DB::NetException:连接被拒绝(localhost:9000)
4 4clickhouse客户端-u默认值-端口9500 -密码
那么连接就可
浏览 5提问于2020-06-19得票数 2
回答已采纳
1回答
我正在研究ClickHouse对于OLAP是否是一个很好的选择。为此，我使用ClickHouse的sintax复制了在PostgreSQL上运行的一些查询。
我运行的所有查询都比Postgres的快得多，但是执行文本搜索的查询却没有内存。下面是错误代码和堆栈跟踪。
clickhouse_driver.errors.ServerException:代码: 241。DB::Exception:内存限制(用于查询)超出: would使用9.31 GiB (尝试分配524288字节的块)，最大值: 9.31 GiB。
查询的脚本是：
SELECT COUNT(*)
FROM ObserverN
浏览 0提问于2019-07-31得票数 1
当我试图通过clickhouse命令行连接到远程clickhouse db时：
$ clickhouse-client -h some_ip.com --port 8123 -u some_user --password some_password -d some_db
我得到：
ClickHouse客户端版本18.12.17。
以用户some_db的身份连接到some_ip.com:8123的数据库some_user。
编号: 102。DB::NetException:来自服务器some_ip:8123、another_ip的意外数据包(预期为Hello或Exception，获得未知数据包
浏览 2提问于2018-10-05得票数 7
回答已采纳
我有一个问题，连接到窗口码头容器与python的驱动程序的点击室。Clickhouse服务器正在我的E驱动器上运行，它位于端口8123的码头容器中。我可以很容易地在R中与这个包连接，如下所示：
conn = DBI::dbConnect(clickhouse::clickhouse(),
host = "my_ip",
port = 8123L,
user = "myun",
password = "mypwd")
但是，当我使用在
浏览 1提问于2019-09-03得票数 5
我已经在wsl2上运行的clickhouse-server上加载了on数据集。服务器端一切正常，但是clickhouse-client突然开始占用大量内存，这在给定的htop输出中很明显。 ? 当仅执行简单的group by查询时， select year,count(1) from datasets.ontime group by year 我不得不关闭wsl才能从中恢复。 如果我做错了什么，请让我知道！ 注意:我已经将ontime数据集的分区指令更改为年和ORIGINSTATE，即：PARTITION BY (Year,OriginState) Clickhouse版本: 21.
浏览 443提问于2021-04-26得票数 1
我可以启动服务器并使用客户端，如下所示...
启动服务器实例
docker run -d --name some-clickhouse-server --ulimit nofile=262144:262144 yandex/clickhouse-server
从本地客户端连接到它
docker run -it --rm --link some-clickhouse-server:clickhouse-server yandex/clickhouse-client --host clickhouse-server
如果我不使用docker，导入csv数据就像这样简单…
cat qv_stock_
浏览 2提问于2017-02-14得票数 2
环境： services:
zookeeper:
image: wurstmeister/zookeeper
ports:
- 2181
kafka:
image: wurstmeister/kafka
ports:
- 9092:9092
#- 8004:8004
links:
- zookeeper
environment:
KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181
KAFKA_ADVERTISED_HOST
浏览 257提问于2019-06-23得票数 1
我已经按照这里的说明安装了。
我还启用了:：in /etc/clickhouse-server/config.xml。
一开始很好，具体如下：
sudo /etc/init.d/clickhouse-server重新启动clickhouse-server服务: /etc/clickhouse-server/config.xml: /var/lib/clickhouse/ to中的数据目录路径
但是，当我启动客户机时，它会失败，如下所示：
客户端ClickHouse客户端版本1.1.54383。连接到本地主机:9000。编号: 102。DB::NetException:来自服务器本地主机的意外数
浏览 0提问于2018-05-23得票数 4
回答已采纳
我想知道是否可以使用打开脱机clickhouse数据库(即clickhouse-server不运行)。
这可能是可能的，因为Native输入格式实际上应该与/var/lib/clickhouse/data/...中的磁盘上格式相同。
我仍然面临的问题是如何在一个clickhouse-local调用中读取多个列文件。
能够做到这一点将是非常酷的，因为它给人一种从不再启动的数据库中拯救数据的良好感觉。
浏览 7提问于2020-08-24得票数 0
回答已采纳
我想从文件中向每个ClickHouse接口插入数据。CSV，JSON，TabSeparated，这不重要。
或将数据插入到Docker容器中使用yandex/clickhouse-server.。
例如，使用HTTP-接口：
cat source.csv | curl 'http://localhost:8123/?query=INSERT INTO table FORMAT CSV'
例如，使用Docker-容器：
docker run -it --rm --link some-clickhouse-server:clickhouse-server yandex/clickh
浏览 4提问于2018-08-24得票数 3
我正在寻找一些明确的卡夫卡表引擎是否支持精确的一次语义。据我所知，clickhouse使用的是librdkafka，而且从1.4版开始，还支持EOS。最新版本的clickhouse正在使用图书库v1.5+。库的使用是否足以确认kafka表引擎支持EOS，还是表引擎功能需要其他更改才能支持EOS？从clickhouse文档中我还不清楚。
浏览 4提问于2021-01-28得票数 0
回答已采纳
2回答
服务器可以在开始发送正文之前多次发送HTTP报头作为响应。例如，clickhouse这样做是为了报告进度。 来自https://clickhouse.tech/docs/en/interfaces/http/amp/： X-ClickHouse-Progress: {"read_rows":"2752512","read_bytes":"240570816","total_rows_to_read":"8880128"}
X-ClickHouse-Progress: {"read_rows
浏览 75提问于2021-07-19得票数 2
在我有限的使用clickhouse的经验中，我需要分析表的索引和分区，有没有办法获得clickhouse的查询，使用什么索引和什么分区？提前谢谢。
浏览 14提问于2021-03-30得票数 0
回答已采纳
我正在处理windows码头桌面10上的clickhouse码头图像：
我已经让集装箱正常运行，并且正在装载数据。我遇到了这样的问题: CH抱怨在xyz行之前需要一个逗号，但是在打开记事本++中的文件后，我知道实际上有一个逗号应该在其中：
Code: 27. DB::Exception: Cannot parse input: expected , before . . .
否则就会有一个关于线尾的问题：
Code: 117. DB::Exception: Expected end of line: (at row 127249)
它还抱怨：
Could not print diagnos
浏览 0提问于2019-08-12得票数 4
回答已采纳
我想把卡夫卡和点击室结合起来。我想将一些数据从REST发送到kafka，并将其传递给clickhouse，这将是我的DB。到目前为止，我能够让卡夫卡在当地工作，并将数据从一端传递到另一端。但当我试图在码头上使用它时，我遇到了一些问题。嗯，我可以看到卡夫卡终端使用的数据，使用的是卡夫卡工具。但我的点击室显然没有连接起来。这就是我在运行我的码头时所犯的错误：
clickhouse-server_1 | %3|1584611439.583|FAIL|ClickHouse 20.3.3.6#consumer-1| [thrd:localhost:9092/bootstrap]: localhost:
浏览 6提问于2020-03-19得票数 0
1回答
我正在尝试从我的应用程序连接到本地ClickhouseDB来执行一些原始查询。当我试图打开连接时，问题就出现了。它永远不会从方法调用返回。
ClickhouseDB是在码头容器中启动的。
using (ClickHouseConnection conn = connFactory.CreateConnection(new ClickHouseConnectionSettings(connectionString)))
{
var cmd = conn.CreateCommand();
cmd.Comman
浏览 3提问于2019-08-14得票数 0
回答已采纳
我试图使用clickhouse-server和clickhouse-client服务来运行Docker和Docker Compose。基于和，我在文件中创建了服务，如下所示：
docker-compose.yml:
ch_server:
container_name: myapp_ch_server
image: yandex/clickhouse-server
ports:
- "8181:8123"
- "9000:9000"
- "9009:9009"
浏览 5提问于2021-02-14得票数 2
回答已采纳
ClickHouse卡夫卡引擎可以使用JSONEachRow格式使用来自JSONEachRow主题的压缩JSON消息吗？
它会自动解压缩消息，然后应用JSON解析吗？它需要什么特殊的配置吗？
编辑我的问题是通过设置压缩配置压缩主题是否会使ClickHouse无法读取这些消息。
浏览 2提问于2018-11-22得票数 1
回答已采纳
我正在测试Clickhouse的插入性能，到目前为止，我能够插入超过200 K的行/秒。对我来说，这很好。然而，我看到系统利用率不是很高，我想知道我是否可以推动更多。
CH位于双xxx 14核@ 2.4 GHz、56 vCPU和256 56 mem的服务器中。并在1小时10分钟内插入1B行。在这段时间里我看到了，
负载平均值: 23.68，22.44，20.32%Cpu: 2.93 us，0.54 sy，0.14ni，95.3 id，0.96WA，0.05hi，0.09si，0 CPU (%CPU，RES)：134.3%，25.6g
以上的数字是平均每5秒从“顶部”。我已经观察到，clickh
浏览 2提问于2021-05-10得票数 0
5回答
我在clickhouse中有一个事件表(MergeTree)，并且希望同时运行许多小的插入。但是，服务器会变得过载，没有响应。此外，一些插入件丢失了。在clickhouse错误日志中有很多记录：
01:43:01.668 [ 16 ] <Error> events (Merger): Part 201 61109_20161109_240760_266738_51 intersects previous part
是否有优化此类查询的方法？我知道我可以对某些类型的事件使用bulk insert。基本上，运行一个包含多个记录的insert，这个clickhouse处理得相当好。但是，
浏览 8提问于2016-11-14得票数 15
回答已采纳
我正在尝试创建ec2托管的clickhouse的实时数据摄取。因为我的管道是
Eventbridge -> KinesisFirehose(destination http endpoint) -> lambda(function url) -> clickhouse HTTP endpoint.
在UAT，一切都如期而至。但是lambda提供的函数url在默认情况下是公开的，这当然会在prod中引起安全问题。是否有任何方法使消防软管到lambda的http端点，以确保lambda的http端点只能由消防软管调用，并且数据不能离开aws帐户。
如果有任何方法来改进这条管道，也
浏览 8提问于2022-05-24得票数 0
我按照clickhouse站点上的说明安装了clickhouse，但是当我运行clickhouse-client时，我得到了连接被拒绝的消息：
root@guest:~# clickhouse-client
ClickHouse client version 1.1.54198.
Connecting to localhost:9000.
Code: 210. DB::NetException: Connection refused: (localhost:9000, 127.0.0.1)
服务器似乎正在运行：
root@guest:~# systemctl status clickhouse
浏览 2提问于2017-04-04得票数 2
3回答
有人在Clickhouse中使用Spring吗？司机的类名是什么？
spring.datasource.driver-class-name=<what is it?>
浏览 5提问于2017-07-04得票数 7
回答已采纳
我试了很多次，但CH没有起作用。请帮帮我/
我根据我输入的ClickHouse在CentOs7上安装
sudo systemctl status clickhouse-server
也没有看到任何结果
我进入了sudo clickhouse-client -h 127.0.0.1 --user default
sudo:无法执行/bin/clickhouse-client:不允许操作
我进入了sudo systemctl status clickhouse-server
clickhouse-server.service - ClickHouse Server (analytic
浏览 19提问于2020-12-24得票数 2
在使用rpm软件包安装clickhouse之后，我们遇到了启动clickhouse的问题。
下面是我们安装时遵循的步骤：
使用以下命令在一个特定位置下载所有必需的包，例如: /opt/clickhouse
# mkdir /opt/clickhouse
# cd /opt/clickhouse # wget http://repo.yandex.ru/clickhouse/rpm/stable/x86_64/clickhouse-common-static-18.12.17-2.x86_64.rpm #wget http://repo.yandex.ru/clickhouse/rpm/stab
浏览 1提问于2019-07-08得票数 1
回答已采纳
我对Pulsar还不熟悉，我只是在探索一个新项目的功能。我正在尝试一个非常基本的例子，根据模式从生产者发送数据。为了给出一些背景，我的想法是将数据从apache发送到Clickhouse数据库。我已经完成了接收器连接器的设置，并使用下面的命令验证了相同的设置。
bin/pulsar-admin接收器状态--租户公共名称空间默认名称jdbc-clickhouse-接收器
bin/pulsar-admin接收器列表--租户公共名称空间默认输出：“jdbc-clickhouse-接收器”
所以我在Clickhouse DB中创建了一个表。我希望将数据发送到一个应该保存在数据库中的主题。在这样做的过程
浏览 8提问于2022-02-11得票数 3
1回答
我正试图在CentOS (CentOS LinuxRelation7.9.2009( ))上安装自我托管的哨兵。
但是，当我运行sudo ./install.sh时，我会得到以下错误：
Failed to connect to clickhouse:9000
Traceback (most recent call last):
File "/usr/local/lib/python3.8/site-packages/clickhouse_driver/connection.py", line 260, in connect
return self._init_c
浏览 13提问于2021-07-07得票数 0
回答已采纳
2回答
我开始学习Docker，遇到了一些问题。我使用Ubuntu，有本地的clickhouse数据库，还有容器中的脚本，它假设在db中写入一些数据： clickhouse-client --host=127.0.0.1 --port=8123 --password=password --query "INSERT INTO some.table FORMAT CSV" 当我运行它时，得到： Code: 210. DB::NetException: Connection refused (127.0.0.1:8123) 当我尝试连接表单DataGrip时，它起作用了。此外，我还使用-
浏览 37提问于2020-07-28得票数 1
clickhouse:
build: ./db/clickhouse
restart: unless-stopped
volumes:
# Store data to HDD
- ./clickhouse-data:/var/lib/clickhouse/
# Base Clickhouse cfg
- ./clickhouse/config.xml:/etc/clickhouse-server/config.xml
- ./clickhouse/users.xml:/etc/clickhouse-server
浏览 9提问于2022-08-17得票数 0
我有一个运行的clickhouse实例，其中我已经安装了clickhouse-备份。我已经连接到它，并且没有遇到像这样的自定义用户运行clickhouse客户机的问题：
clickhouse-client -u fred --password 12345
但是当我做clickhouse-backup tables的时候
can't connect to clickhouse: code: 516, message: default: Authentication failed: password is incorrect or there is no user with such na
浏览 7提问于2021-01-25得票数 1
回答已采纳
2回答
我写这段代码：
from airflow import DAG
from airflow.hooks.clickhouse_hook import ClickHouseHook
from airflow.operators.python_operator import PythonOperator
from airflow.utils.dates import days_ago
from datetime import datetime
default_args = {
'owner': 'airflow',
'depends_on_
浏览 21提问于2020-10-19得票数 1
回答已采纳
所有人。我在Ubuntu上安装了clickhouse。但当我试图启动服务器时：
sudo systemctl start clickhouse-server
什么都没发生。我还注意到db不监听默认端口8123。例如，下面的命令没有给出任何结果：
sudo netstat -tulpn | grep clickhouse
sudo netstat -tulpn | grep 8123
当我尝试启动服务器'clickhouse-client -password‘时，我得到：
ClickHouse client version 22.8.4.7 (official build).
Pas
浏览 60提问于2022-09-07得票数 0
1回答
码头文件
FROM ubuntu:20.04
ENV CH_VERSION 21.8.11.4
RUN \
apt-get update && \
apt-get install --yes --no-install-recommends \
apt-transport-https \
apt-utils \
dirmngr \
gnupg && \
apt-key adv --keyserver keyserver.ubuntu.com --recv E0C56BD4 && \
echo
浏览 2提问于2021-11-25得票数 0
我对clickhouse很陌生。在几次安装18.16.1版本的失败尝试之后，我清除了clickhouse-server和clickhouse-client (sudo dpkg --purge clickhouse-server和sudo dpkg --purge clickhouse-common)。
在确保sudo apt --fix-broken install没有返回任何错误消息之后，我使用apt：sudo apt install clickhouse-server clickhouse-client安装了客户机和服务器。
安装时，我收到以下警告：
警告: clickhouse-ser
浏览 7提问于2020-11-18得票数 0
回答已采纳
我正在尝试使用docker设置一个带有1个碎片和2个副本的ClickHouse集群。为了测试目的，我在一个容器中只有一个动物园管理员，两个ClickHouse容器。创建非复制表是可能的，但不可能使用复制表。
当我创建一个复制表时
CREATE TABLE company_db.g ON CLUSTER company_cluster
(
`payload` String
)
ENGINE = ReplicatedMergeTree
ORDER BY payload
ClickHouse返回
┌─host────────┬─port─┬─status─┬─error───────────
浏览 26提问于2021-12-09得票数 0
回答已采纳
我正在开发一个新安装的Ubuntu18.04VM。
通过以下步骤，我已经安装了ClickHouse。
echo "deb http://repo.yandex.ru/clickhouse/deb/stable/ main/" | sudo tee /etc/apt/sources.list.d/clickhouse.list
sudo apt-key adv --keyserver keyserver.ubuntu.com --recv E0C56BD4
sudo apt-get update
sudo apt-get install -y clickhouse-server
浏览 0提问于2018-12-04得票数 0
回答已采纳
我正在尝试将/var/lib/clickhouse更改为类似于/mnt/sdc/clickhouse的东西，这样我就可以在另一个硬盘中使用clickhouse。我试过以下步骤：
1.停止点击
/mnt/sdc/clickhouseReplace 将/var/lib/clickhouse目录移动到/etc/clickhouse-server/config.xmlStart Clickhouse文件中的所有/var/lib/到/mnt/sdc/
但是问题是/var/lib/clickhouse包含硬链接，所以当我mv目录时，这个硬链接就被破坏了。
这样可以吗？
我应该如何更改clickhous
浏览 1提问于2021-09-29得票数 1
回答已采纳
我对clickhouse还不熟悉。我在Ubuntu和MacOS上都尝试了clickhouse。至于ubuntu版本，我知道服务器config.xml位于/etc/clickhouse- server /文件夹下。但是，在Mac上，我找不到带有提供了config.xml的快速启动安装方法的路径的。
wget 'https://builds.clickhouse.com/master/macos/clickhouse'
chmod a+x ./clickhouse
./clickhouse
我知道我可以构建一个clickhouse来获取/etc/文件夹中的配置文件。但是，如果我选择
浏览 6提问于2022-01-28得票数 0
回答已采纳
我正在Ubuntu 20.04.1 LTS上本地安装clickhouse-server和clickhouse-client。我之前的一个安装很好，但是在某些时候它坏了。从这里运行官方推荐的脚本后：https://clickhouse.tech/docs/en/getting-started/install/ sudo apt-get install apt-transport-https ca-certificates dirmngr
sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv E0C56BD4
ech
浏览 572提问于2021-01-29得票数 0
回答已采纳
我们需要将数据从postgres插入到clickhouse。postgres中的一个字段具有json类型。在clickhouse中，该字段具有Nullable(String)类型。对于插入数据，我们使用气流ClickHouse插件
data = postgress_hook.get_records(query)
clickhouse_hook.run(
sql="INSERT INTO "+ self.clickhouse_tgt_table +" values",
p
浏览 6提问于2020-11-06得票数 0
我正在使用Docker for Windows：
码头版18.03.1-ce-win64 64
船坞引擎18.03.1-ce
ClickHouse客户端版本1.1.54380
ClickHouse服务器版本1.1.54380
为了将数据从表导出为CSV格式，我使用以下命令：
现在运行用于导出的clickhouse-client容器
$ docker运行-it --rm -链接clickhouse-服务器:clickhouse-client yandex/clickhouse- -m -query=“select* from default.table1 defaul
浏览 1提问于2018-05-04得票数 1
查询clickhouse db时出现错误。“ const { ClickHouse } = require('clickhouse');
const clickhouse = new ClickHouse({
debug: false,
basicAuth: {
username: 'username',
password: 'password',
},
});
clickhouse.query('SHOW DATABASES;').exec((err, rows) => {
console
浏览 177提问于2019-08-31得票数 0
回答已采纳
我正在尝试将clickhouse数据目录移动到另一个分区/dev/sdb1。所以我所做的就是：
sudo systemctl stop clickhouse-server
mv /var/lib/clickhouse /var/lib/clickhouse-orig
mkdir /var/lib/clickhouse
chown clickhouse:clickhouse /var/lib/clickhouse
mount -o user /dev/sdb1 /var/lib/clickhouse
cp -Rv /var/lib/clickhouse-orig/* /var/lib/clic
浏览 0提问于2021-06-15得票数 1
回答已采纳
我正在尝试使用python模块clickhouse_driver执行对clickhouse的选择查询： from django.conf import settings
from clickhouse_driver import Client
CLICKHOUSE_SETTINGS = settings.CLICKHOUSE
clickhouse_client = Client(**CLICKHOUSE_SETTINGS)
def get_data_1():
data_1 = clickhouse_client.execute("SELECT * from table_1
浏览 269提问于2021-08-30得票数 -1
我们有一个将数据复制到客户端CH集群的用例。我们需要包括历史数据和增量数据(每5-6分钟)。我们可以使用clickhouse复印机/clickhouse备份吗？(永远保持副本运行)
每5分钟记录的次数将在200到500之间。我们想避免做选择..。插入，因为它将需要更多的开发工作和另一个外部进程来监控。
据我所见，它看起来像是一次复制-复印机是一个一次性操作工具？这是对的吗？
浏览 2提问于2020-08-31得票数 0
回答已采纳
我有个Django项目。我已经使用clickhouse_fdw连接了一个clickhouse表和一个postgres表。按照clickhouse_fdw的说明，我在postgres中这样做了：
CREATE EXTENSION clickhousedb_fdw;
CREATE SERVER clickhouse_svr FOREIGN DATA WRAPPER clickhousedb_fdw OPTIONS(host 'host', dbname 'dbname', driver '/var/lib/postgresql/libclickhouseod
浏览 3提问于2019-07-13得票数 3
我想使用连接clickhouse和jdbc驱动程序。我的驱动程序设置如下：
司机名称: clickhouse
类名: ru.yandex.clickhouse.ClickHouseDriver
URL模板: jdbc:clickhouse://{host}:{port}
当我测试连接时，它会抛出这样的异常：
ru.yandex.clickhouse.except.ClickHouseUnknownException: ClickHouse异常，代码: 1002，主机: xxx，端口: 8123；错误而读取响应魔术不正确: 112
我哪里错了？
浏览 13提问于2017-10-13得票数 0
回答已采纳
1回答
我正在尝试通过clickhouse-keeper.设置和测试复制
这是我的docker.compose.yaml
version: "3.7"
services:
clickhouse01:
image: yandex/clickhouse-server
container_name: clickhouse01
hostname: clickhouse01
ports:
- 8811:8123
- 9011:9000
volumes:
- "D:/clichhouse-data/volum
浏览 10提问于2022-05-27得票数 0
1回答
按定义，向下钻取要求使用分层数据，其中值被分组为级别.()
我对钻取特性的理解是由OLAP引擎(例如Clickhouse、Apache、Apache等)提供的，而不是BI/可视化工具(例如Tableau、Superset、Grafana等)。然而，从这张幻灯片中可以看到是可信的:流行的BI工具用于ClickHouse ()，它说Grafana支持数据的交互式演练，而不是Superset。
我的问题：
下钻功能是在OLAP还是BI层？
向下钻取功能需要预先计算的维度聚合吗？
如何确定可以向下钻的尺寸？手动还是自动？
谢谢。
浏览 11提问于2022-10-05得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
