当前位置: 首页 > news >正文

ES数据导出成csv文件

推荐使用es2csv 工具。

命令行实用程序,用Python编写,用于用Lucene查询语法或查询DSL语法查询Elasticsearch,并将结果作为文档导出到CSV文件中。该工具可以在多个索引中查询批量文档,并且只获取选定的字段,这减少了查询的执行时间。

使用样例:

docker pull demonslh/es2csvdocker run --rm --network=host -v /root/es2csv:/data demonslh/es2csv es2csv -i t_user -q '*' -o database.csv#### 参数
es2csv [-h] -q QUERY [-u URL] [-a AUTH] [-i INDEX [INDEX ...]][-D DOC_TYPE [DOC_TYPE ...]] [-t TAGS [TAGS ...]] -o FILE[-f FIELDS [FIELDS ...]] [-S FIELDS [FIELDS ...]] [-d DELIMITER][-m INTEGER] [-s INTEGER] [-k] [-r] [-e] [--verify-certs][--ca-certs CA_CERTS] [--client-cert CLIENT_CERT][--client-key CLIENT_KEY] [-v] [--debug]Arguments:-q, --query QUERY                        Query string in Lucene syntax.               [required]-o, --output-file FILE                   CSV file location.                           [required]-u, --url URL                            Elasticsearch host URL. Default is http://localhost:9200.-a, --auth                               Elasticsearch basic authentication in the form of username:password.-i, --index-prefixes INDEX [INDEX ...]   Index name prefix(es). Default is ['logstash-*'].-D, --doc-types DOC_TYPE [DOC_TYPE ...]  Document type(s).-t, --tags TAGS [TAGS ...]               Query tags.-f, --fields FIELDS [FIELDS ...]         List of selected fields in output. Default is ['_all'].-S, --sort FIELDS [FIELDS ...]           List of <field>:<direction> pairs to sort on. Default is [].-d, --delimiter DELIMITER                Delimiter to use in CSV file. Default is ",".-m, --max INTEGER                        Maximum number of results to return. Default is 0.-s, --scroll-size INTEGER                Scroll size for each batch of results. Default is 100.-k, --kibana-nested                      Format nested fields in Kibana style.-r, --raw-query                          Switch query format in the Query DSL.-e, --meta-fields                        Add meta-fields in output.--verify-certs                           Verify SSL certificates. Default is False.--ca-certs CA_CERTS                      Location of CA bundle.--client-cert CLIENT_CERT                Location of Client Auth cert.--client-key CLIENT_KEY                  Location of Client Cert Key.-v, --version                            Show version and exit.--debug                                  Debug mode on.-h, --help                               show this help message and exit

源码地址:GitHub - just3019/es2csv: Export from an Elasticsearch into a CSV file

http://www.lryc.cn/news/356830.html

相关文章:

  • 结构型设计模式之装饰模式
  • Java - 当年很流行,现在已经淘汰的 Java 技术,请不要在继续学了!!!
  • 驻波比VSWR
  • 多线程-线程池
  • 护网期间遇到的几个上传bypass waf、edr
  • 简述MVC模式
  • C#--Mapster(高性能映射)用法
  • mysql实战——Mysql8.0高可用之双主+keepalived
  • 关于同一个地址用作两个不同页面时,列表操作栏按钮混淆状态
  • Oracle段延迟分配(Deferred Segment Creation)解析
  • Linux:IPC - System V
  • Laravel 图片添加水印
  • 嵌入式进阶——矩阵键盘
  • 请说出vue.cli项目中src目录每个文件夹和文件的用法
  • 【MySQL精通之路】InnoDB磁盘I/O和文件空间管理(11)
  • 基于springboot+html的二手交易平台(附源码)
  • 正点原子[第二期]Linux之ARM(MX6U)裸机篇学习笔记-24.3,4 SPI驱动实验-I.MX6U SPI 寄存器
  • 【Pandas】数据处理方法
  • 【ArcGIS For JS】前端geojson渲染行政区划图层并加标签
  • Spring AOP原理详解:动态代理与实际应用
  • 死锁的四个必要条件
  • 源网络地址转换SNAT
  • 【算法】平衡二叉搜索树的左旋和右旋
  • 介绍Django Ninja框架
  • 使用uniapp内置组件checkbox-group所遇到的问题
  • 嵌入式学习记录5.23(超时检测、抓包分析)
  • Linux|如何在 awk 中使用流控制语句
  • OceanBase数据库诊断调优,与高可用架构——【DBA从入门到实践】第八期
  • LLVM技术在GaussDB等数据库中的应用
  • 【SQL学习进阶】从入门到高级应用(三)