百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程网 > 正文

Python的elasticsearch中bulk API增删改查导入导出

yuyutoo 2024-10-28 20:21 1 浏览 0 评论

Elasticsearch中的bulk API是一个可以对Elasticsearch执行多个操作的批量API,可以大大提升操作效率。常见的bulk操作包括增删改查和导入导出数据。


以下是Python的elasticsearch中bulk API实现增删改查和导入导出数据的示例代码:


```python

from elasticsearch import Elasticsearch

import json


# 连接elasticsearch

es = Elasticsearch()


# 插入一个document

es.index(index='my-index', doc_type='my-type', id=1, body={'title': 'example'})


# 使用bulk API插入多个document

actions = [

{

'_index': 'my-index',

'_type': 'my-type',

'_id': i,

'_source': {'title': 'example{}'.format(i)}

}

for i in range(2, 7)

]

response = es.bulk(actions)


# 使用bulk API删除单个document,第二个document

delete_query = {

'delete': {

'_index': 'my-index',

'_type': 'my-type',

'_id': 2

}

}

response = es.bulk(delete_query)


# 使用bulk API更新单个document,第三个document

update_query = {

'update': {

'_index': 'my-index',

'_type': 'my-type',

'_id': 3

}

}

doc = {

'doc': {

'title': 'updated example 3'

}

}

response = es.bulk([update_query, doc])


# 使用bulk API查询多个document

search_query = {

'query': {

'match_all': {}

}

}

response = es.search(index='my-index', doc_type='my-type', body=search_query)


# 使用bulk API导出数据

export_query = {

'query': {

'match_all': {}

}

}

scroll = '2m'

exported_data = []

search_results = es.search(index='my-index', doc_type='my-type', body=export_query, scroll=scroll, size=1000)

while len(search_results['hits']['hits']) > 0:

for hit in search_results['hits']['hits']:

exported_data.append(hit['_source'])

scroll_id = search_results['_scroll_id']

search_results = es.scroll(scroll_id=scroll_id, scroll=scroll)


with open('exported_data.json', 'w') as f:

json.dump(exported_data, f)


# 使用bulk API导入数据

bulk_data = []

with open('exported_data.json', 'r') as f:

exported_data = json.load(f)

for data in exported_data:

bulk_data.append({

'index': {

'_index': 'my-index',

'_type': 'my-type',

'_id': data['id']

}

})

bulk_data.append(data)

response = es.bulk(bulk_data)

```


以上代码示例使用elasticsearch中的bulk API实现了增删改查和导入导出数据的功能,可以根据需要进行调整。



相关推荐

如何在HTML中使用JavaScript:从基础到高级的全面指南!

“这里是云端源想IT,帮你...

推荐9个Github上热门的CSS开源框架

大家好,我是Echa。...

前端基础知识之“CSS是什么?”_前端css js

...

硬核!知网首篇被引过万的论文讲了啥?作者什么来头?

整理|袁小华近日,知网首篇被引量破万的中文论文及其作者备受关注。知网中心网站数据显示,截至2021年7月23日,由华南师范大学教授温忠麟等人发表在《心理学报》2004年05期上的学术论文“中介效应检验...

为什么我推荐使用JSX开发Vue3_为什么用vue不用jquery

在很长的一段时间中,Vue官方都以简单上手作为其推广的重点。这确实给Vue带来了非常大的用户量,尤其是最追求需求开发效率,往往不那么在意工程代码质量的国内中小企业中,Vue占据的份额极速增长...

【干货】一文详解html和css,前端开发需要哪些技术?
【干货】一文详解html和css,前端开发需要哪些技术?

网站开发简介...

2025-02-20 18:34 yuyutoo

分享几个css实用技巧_cssli

本篇将介绍几个css小技巧,目录如下:自定义引用标签的符号重置所有标签样式...

如何在浏览器中运行 .NET_怎么用浏览器运行代码

概述:...

前端-干货分享:更牛逼的CSS管理方法-层(CSS Layers)

使用CSS最困难的部分之一是处理CSS的权重值,它可以决定到底哪条规则会最终被应用,尤其是如果你想在Bootstrap这样的框架中覆盖其已有样式,更加显得麻烦。不过随着CSS层的引入,这一...

HTML 基础标签库_html标签基本结构
HTML 基础标签库_html标签基本结构

HTML标题HTML标题(Heading)是通过-...

2025-02-20 18:34 yuyutoo

前端css面试20道常见考题_高级前端css面试题

1.请解释一下CSS3的flexbox(弹性盒布局模型),以及适用场景?display:flex;在父元素设置,子元素受弹性盒影响,默认排成一行,如果超出一行,按比例压缩flex:1;子元素设置...

vue引入外部js文件并使用_vue3 引入外部js

要在Vue中引入外部的JavaScript文件,可以使用以下几种方法:1.使用``标签引入外部的JavaScript文件。在Vue的HTML模板中,可以直接使用``标签来引入外部的JavaScrip...

网页设计得懂css的规范_html+css网页设计

在初级的前端工作人员,刚入职的时候,可能在学习前端技术,写代码不是否那么的规范,而在工作中,命名的规范的尤为重要,它直接与你的代码质量挂钩。网上也受很多,但比较杂乱,在加上每年的命名都会发生一变化。...

Google在Chrome中引入HTML 5.1标记

虽然负责制定Web标准的WorldWideWebConsortium(W3C)尚未宣布HTML5正式推荐规格,而Google已经迁移到了HTML5.1。即将发布的Chrome38将引入H...

HTML DOM 引用( ) 对象_html中如何引用js

引用对象引用对象定义了一个同内联元素的HTML引用。标签定义短的引用。元素经常在引用的内容周围添加引号。HTML文档中的每一个标签,都会创建一个引用对象。...

取消回复欢迎 发表评论: