广告
返回顶部
首页 > 资讯 > 精选 >怎么使用elasticsearch定时删除索引数据
  • 420
分享到

怎么使用elasticsearch定时删除索引数据

2023-06-14 09:06:57 420人浏览 薄情痞子
摘要

这篇文章给大家分享的是有关怎么使用elasticsearch定时删除索引数据的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。1、有的时候我们在使用ES由于资源有限或业务需求,我们只想保存最近一段时间的数据,所以有必

这篇文章给大家分享的是有关怎么使用elasticsearch定时删除索引数据的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

1、有的时候我们在使用ES

由于资源有限或业务需求,我们只想保存最近一段时间的数据,所以有必要做定时删除数据。

2、编写脚本

vim del_es_by_day.sh#!/bin/bash#定时删除elasticsearch索引#author menard 2019-3-25date=`date -d "-7 days" "+%Y.%m.%d"`/usr/bin/curl -v --user elastic:passWord -XDELETE "Http://192.168.10.201:92001 * * * * /opt/scheduler/es_bk.sh >> /opt/scheduler/bk_log.txt 2>&1

每隔1分钟定时执行 /opt/scheduler/目录下的es_bk.sh脚本,将数据内容写入到 /opt/scheduler目录下的bk.log.txt文件中

查看一下es_bk.sh脚本内容

#! /bin/bashecho '=================================start======================================'#删除备份的快照curl -i -X DELETE localhost:9200/_snapshot/es_backup/snapshot01#再次备份curl -i -X PUT localhost:9200/_snapshot/es_backup/snapshot01echo '==================================end======================================='

ES备份数据需要将要备份的索引数据快照一份,需要指定一个快照名,且不能使用相同的快照,所以在每次备份之前需要删除旧的快照,再备份。

ES备份与恢复

创建一个备份仓库(目录)

mkdir -p /bk/es/data#修改权限chmod -R 777 bk

修改elasticsearch.yml文件,指定仓库位置

怎么使用elasticsearch定时删除索引数据

发送初始化仓库请求

curl -i -H ""'Content-Type:application/JSON;charset=UTF-8'"" -X PUT --data '{"type": "fs","settings": {"location": "/bk/es/data"}}' localhost:9200/_snapshot/es_backup

es_backup是备份命名空间,可以随意指定

创建第一份快照

curl -i -X PUT localhost:9200/_snapshot/es_backup/snapshot01

将使用es_backup这个备份将es的所有索引数据备份到snapshot01这个快照下,当然也可以只备份指定索引

curl -i -H ""'Content-Type:application/json;charset=UTF-8'"" -X PUT --data '{"indices": "'bk_user_index_server'"}' localhost:9200/_snapshot/es_backup/snapshot01

重启定时任务

systemctl restart cron

恢复索引

恢复指定

curl -i -H ""'Content-Type:application/json;charset=UTF-8'"" -X POST --data '{"indices": "'bk_user_index_server'"}' localhost:9200/_snapshot/es_backup/snapshot01/_restore

恢复所有

curl -i -X POST localhost:9200/_snapshot/es_backup/snapshot01/_restore

感谢各位的阅读!关于“怎么使用elasticsearch定时删除索引数据”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!

--结束END--

本文标题: 怎么使用elasticsearch定时删除索引数据

本文链接: https://www.lsjlt.com/news/269430.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • 怎么使用elasticsearch定时删除索引数据
    这篇文章给大家分享的是有关怎么使用elasticsearch定时删除索引数据的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。1、有的时候我们在使用ES由于资源有限或业务需求,我们只想保存最近一段时间的数据,所以有必...
    99+
    2023-06-14
  • 使用elasticsearch定时删除索引数据
    1、有的时候我们在使用ES 由于资源有限或业务需求,我们只想保存最近一段时间的数据,所以有必要做定时删除数据。 2、编写脚本 vim del_es_by_day.sh #!/bi...
    99+
    2022-11-12
  • elasticsearch怎么根据条件删除数据
    今天小编给大家分享一下elasticsearch怎么根据条件删除数据的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。Elast...
    99+
    2023-07-05
  • Partition table分区表删除分区数据时导致索引失效怎么办
    小编给大家分享一下Partition table分区表删除分区数据时导致索引失效怎么办,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下...
    99+
    2022-10-18
  • python怎么根据索引删除列表元素
    可以使用del语句根据索引删除列表元素。例如,要删除列表中索引为2的元素,可以使用以下代码:```pythonmy_list = [...
    99+
    2023-09-26
    python
  • 使用shell脚本怎么批量删除es索引
    使用shell脚本怎么批量删除es索引?相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。发现elasticsearch集群的状态是red,unassign的分片数很多,看了下都是些...
    99+
    2023-06-09
  • 怎么在mongodb中定时数据库备份和删除
    今天就跟大家聊聊有关怎么在mongodb中定时数据库备份和删除,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。一、备份常用命令:mongodump-hIP--port端口-u用户名-p...
    99+
    2023-06-14
  • 使用canal监控mysql数据库实现elasticsearch索引实时更新问题
    目录业务场景安装下载安装数据库启用row binlog使用修改配置文件canal.properties配置单个连接配置多个连接配置rabbitMQ程序改动canal源码微服务消费mq...
    99+
    2022-11-13
  • 使用R语言怎么删除指定的数据
    本篇文章为大家展示了使用R语言怎么删除指定的数据,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。数据准备> Data  英雄 职业 熟练等级&n...
    99+
    2023-06-08
  • Elasticsearch索引的分片分配Recovery怎么使用
    本篇内容主要讲解“Elasticsearch索引的分片分配Recovery怎么使用”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Elasticsearch索引的分片分配Recovery怎么使用”...
    99+
    2023-06-30
  • win10怎么删除引导项残留数据
    要删除Windows 10中的引导项残留数据,可以按照以下步骤进行操作:1. 打开命令提示符:点击“开始”菜单,搜索“命令提示符”,...
    99+
    2023-09-12
    win10
  • 使用python在es中基本操作详解(添加索引、查询索引、删除索引、判断索引是否存在、添加数据、更新数据、查询数据)
    1.添加索引 示例代码1: from elasticsearch import Elasticsearches = Elasticsearch(hosts='http://127.0.0.1:9200')# print(es)doc = {...
    99+
    2023-09-14
    elasticsearch python
  • r语言怎么删除指定数据
    在R语言中,可以使用下列方法删除指定数据:1. 使用subset()函数:```R# 创建一个数据框df ...
    99+
    2023-09-14
    r语言
  • sql怎么删除指定条件数据
    要删除指定条件的数据,可以使用 DELETE 语句。语法如下: DELETE FROM 表名 WHERE 条件; 其...
    99+
    2023-10-26
    sql
  • 怎么用Shell定时删除指定时间之前的文件
    这篇文章主要介绍“怎么用Shell定时删除指定时间之前的文件”,在日常操作中,相信很多人在怎么用Shell定时删除指定时间之前的文件问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”怎么用Shell定时删除指定时...
    99+
    2023-06-09
  • oracle删除分区后索引不可用怎么解决
    在 Oracle 中,当你删除一个包含索引的分区后,索引将不再可用。这是因为索引是针对特定分区数据而创建的,当分区被删除后,索引的元...
    99+
    2023-08-20
    oracle
  • MongoDB数据库索引怎么使用
    这篇“MongoDB数据库索引怎么使用”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“MongoDB数据库索引怎么使用”文章吧...
    99+
    2023-07-02
  • MSSQL中怎么删除用户时数据库主体
    今天就跟大家聊聊有关MSSQL中怎么删除用户时数据库主体,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。在ms sql2005 下面删除一个数据库的用...
    99+
    2022-10-18
  • 怎么判定ADO数据库删除记录
    本篇内容介绍了“怎么判定ADO数据库删除记录”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!ADO数据库需要为信息的字段赋值,如果FiledL...
    99+
    2023-06-17
  • Python pandas怎么删除指定行/列数据
    Python pandas怎么删除指定行/列数据,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。1.滤除缺失数据dropna()import pandas&n...
    99+
    2023-06-29
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作