文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

Clickhouse通过命令导入导出文件(在Linux命令窗口)

2023-09-06 08:53

关注

问题:在Linux服务器的命令窗口,通过命令行的方式对部署在该服务器的clickhouse里面的数据进行导入导出文件操作。

操作的clickhouse相关信息:

        数据库名:default

        数据库密码:ps123

        操作的数据库表:student

create table student(name String,age Int, sex Int,address String)ENGINE = MergeTreeORDER BY tuple()

在linux窗口执行Clickhouse的sql语句

clickhouse-client --password ps123 -d default -q "insert into student values('小王', '18', '1', 'XXX小区')"

导出student表数据至服务器磁盘

# 导出带表头的txt文件clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSVWithNames" --format_csv_delimiter='|' > /data/student.txt# 导出不带表头的txt文件clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSV" --format_csv_delimiter='|' > /data/student.txt# 导出带表头的csv文件clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSVWithNames" --format_csv_delimiter='|' > /data/student.csv# 导出不带表头的csv文件clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSV" --format_csv_delimiter='|' > /data/student.csv

注意:如果执行语句后面不加FORMAT CSV或FORMAT CSVWithNames,默认是\t作为分隔符。只有指定FORMAT CSV或FORMAT CSVWithNames后,指定--format_csv_delimiter才生效。

3、导入服务器磁盘文件到数据库

# 导入带表头的txt文件clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSVWithNames" --format_csv_delimiter='|'  <  /data/student1.txt# 导入不表头的txt文件clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSV" --format_csv_delimiter='|'  <  /data/student1.txt# 导入带表头的csv文件clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSVWithNames" --format_csv_delimiter='|'  <  /data/student1.csv# 导入不表头的csv文件clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSV" --format_csv_delimiter='|'  <  /data/student1.csv

导入带表头的文件格式:

4、客户端连接Clickhouse数据库

clickhouse-client -h localhost --port 9001 -u default --password ps123 --database default;

clickhouse-client的常用参数:
1、-C:--config-file 配置文件目录
2、-c:--config 配置文件目录
3、-h:--host 服务器ip地址
4、--port: 指定端口
5、-u:--user 指定用户名
6、--password: 指定密码
7、--ask-password :询问密码
8、-q:--query 指定SQL
9、-d:--database 指定数据库,默认数据库为default,如果是默认数据库,可选择不写
10、-m:--multiline 多行组合成一个sql执行。
11、-n:--multiquery 一次执行多个SQL,SQL之间使用’;'分号隔离
12、--queries-file:指定SQL文件(file1 file2)
13、-f:--format 输出格式

14、FORMAT CSV:指导入导出的文件类型,不带表头,导出的文件名后置可以为csv\txt\json,FORMAT CSV等同于--format CSV

15、FORMAT CSVWithNames:同FORMAT CSV,但是文件带导出表头,FORMAT CSVWithNames等同于--format CSVWithNames
16、-t:--time 在非交互式格式中将执行时间打印到错误日志中。
17、--format_csv_delimiter:指定CSV数据中的列分隔符, 默认情况下分隔符为逗号(,)。

操作中遇到的问题:

(1)执行导出文件命令时,由于--format_csv_delimiter='\t'导致报错:

[root@local ~]# clickhouse-client --password ps123 -d default -q "select * from student" --format_csv_delimiter='\t' --format CSVWithNames > /data/student.txtCode: 19. DB::Exception: A setting's value string has to be an exactly one character long. (SIZE_OF_FIXED_STRING_DOESNT_MATCH)

(2)执行导入文件命令时,由于--format CSVWithNames不能用于导入语句中而报错

[root@local ~]# clickhouse-client --password ps123 -d default -q "insert into student" --format_csv_delimiter='|' --format CSVWithNames < /data/student.txtCode: 62. DB::Exception: Syntax error: failed at position 20 (end of query): . Expected one of: token, Dot, OpeningRoundBracket, FROM INFILE, VALUES, FORMAT, SELECT, WITH, WATCH. (SYNTAX_ERROR)

来源地址:https://blog.csdn.net/qq_39512532/article/details/127577952

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     807人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     351人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     314人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     433人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     221人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-人工智能
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯