• 在庆祝海南建省办经济特区30周年大会上的讲话 2019-10-07
  • 俄罗斯世界杯F组:球迷风采 2019-09-24
  • 彭于晏廖凡曝姜文“精神洁癖” 2019-09-24
  • 苏州大学研究生支教团网上众筹资助留守儿童 2019-09-23
  • 湖北政务微信排行榜第187期出炉 交警类公号表现亮眼 2019-09-19
  • 【奋斗吧2018】风电检修工——荒原上的“听风者” 2019-08-31
  • 母亲节又送康乃馨?送这样的健康佳品才走心 2019-08-30
  • [酷]此文已经把马克思理论、边际理论、人类需求层次理论、生物学理论、心理学理论、社会管理学理论等理论在哲学层面完美融合了! 2019-08-26
  • 兰芝雪纱修颜气垫隔离霜 2019-07-27
  • “鹊桥”中继星顺利进入使命轨道运行 2019-07-27
  • 超越舆情管理的360度信息决策 2019-07-22
  • 视频陶然居变形记:从路边小饭馆到全国餐饮十强 2019-07-21
  • 防震减灾事业发展的重要理论成果 2019-07-20
  • 珠宝配美人!李冰冰大片衣着性感秀身段 2019-07-20
  • 机器人也能拥有“情商”?这个可以有 2019-07-19
  • 香港赛马会外围管理局:shell脚本批量删除es索引的方法

     更新时间:2019年03月15日 08:32:41   作者:Scub   我要评论
    今天小编就为大家分享一篇关于shell脚本批量删除es索引的方法,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧

    香港赛马会网站惠泽社绝杀八码 www.mwcrz.tw 发现elasticsearch集群的状态是red,unassign的分片数很多,看了下都是些旧的日期的索引(应该是定时任务删除失败导致的)。

    curl -XGET ip:port/_cat/shards | grep UNASSIGNED

    数量有几百个,写个脚本处理下,先恢复成green。red状态好像会影响索引创建和数据迁移

    先把需要删除的索引导出到文件

    curl -XGET ip:port/_cat/shards | grep UNASSIGNED >> needDelIndex.txt

    确认下要删除的索引列表。没问题就执行下面删除shell(es的ip和端口需要修改下)

    #!/bin/bash
    echo "$1"
    esUrl=${esip}:${esport}
    indexfile=needDelIndex.txt
    #cp -f /dev/null ${indexfile}
    #curl -XGET ip:port/_cat/shards | grep UNASSIGNED >> needDelIndex.txt
    if [ ! -f ./${indexfile} ]; then
      echo $indexfile not exists
      exit 0
    fi
    logfile=esindex_del.`date +"%m-%d"`.log
    cp -f /dev/null ${logfile}
    lastIndexName="test"
    for item in `cat ${indexfile} | awk '{print $1}'`
    do
      if [ "$item" = "error" ]
      then
        continue
      fi
      if [ "$item" != "$lastIndexName" ]
      then
        curl -XDELETE ${esUrl}/${item} >> ${logfile}
        echo ---------${item} `date` >> ${logfile}
        sleep 5
      fi
      lastIndexName=${item}
    done

    因为我们的索引是按天创建的,索引名前缀是yyyy-MM-dd, 保留一段时间后需要批量删除。shell的第一个参数为yyyy-MM-dd,将删除该天及以前的旧索引

    #!/bin/bash
    esUrl=${esip}:${esport}
    echo "$1"
    if [ $# -ge 1 ]
    then
      deleteDate=$1
    else
      echo "please inpust detete esindex's date(yyyy-MM-dd)"
      exit 0
    fi
    indexfile=esindex.info
    cp -f /dev/null ${indexfile}
    curl '${esUrl}/_cat/indices' >> ${indexfile}
    logfile=esindex_del.`date +"%m-%d"`.out
    cp -f /dev/null ${logfile}
    for item in `cat ${indexfile} | awk '{print $3}'`
    do
      if [ "$item" = "error" ]
      then
        continue
      fi
      parameter=${esUrl}/${item}
      indexdate=${item:0:10}
      if [ "$indexdate" = "$deleteDate" ]
      then
        curl -XDELETE ${parameter} >> ${logfile}
        echo ---------${item} >> ${logfile}
        sleep 5
      elif [[ "$indexdate" < "$deleteDate" ]]
      then
        curl -XDELETE ${parameter} >> ${logfile}
        echo ---------${item} >> ${logfile}
        sleep 5
      fi
    done

    总结

    以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对脚本之家的支持。如果你想了解更多相关内容请查看下面相关链接

    相关文章

    • linux基础之Shell Script入门介绍

      linux基础之Shell Script入门介绍

      本文介绍下,学习shell script编程的入门知识,通过几个入门实例,带领大家走进shell script的神圣殿堂,呵呵,有需要的朋友参考下
      2013-11-11
    • 浅析Linux常用文件管理命令

      浅析Linux常用文件管理命令

      这篇文章主要介绍了Linux常用文件管理命令,非常不错,具有一定的参考借鉴价值 ,需要的朋友可以参考下
      2019-04-04
    • Linux启动新进程的三种方法

      Linux启动新进程的三种方法

      本篇文章主要介绍了Linux启动新进程的三种方法以及这三种方法之间的区别。具有很好的参考价值。下面跟着小编一起来看下吧
      2017-04-04
    • Ubuntu、Linux Mint一键安装Chrome浏览器的Shell脚本分享

      Ubuntu、Linux Mint一键安装Chrome浏览器的Shell脚本分享

      这篇文章主要介绍了Ubuntu、Linux Mint一键安装Chrome浏览器的Shell脚本分享,本文直接给出实现代码,需要的朋友可以参考下
      2015-03-03
    • linux链接编译详解

      linux链接编译详解

      通过自己编写Makefile文件来实现多目标文件的链接,其实就是将gcc 编译命令写入到Makefile文件,通过执行make 指令来实现编译。这样我不需要每次都敲入gcc -指令。直接输入make就OK了。
      2014-02-02
    • 使用bash shell删除目录中的特定文件的3种方法

      使用bash shell删除目录中的特定文件的3种方法

      这篇文章主要介绍了使用bash shell删除目录中的特定文件的3种方法,分别为扩展模式匹配符、GLOBIGNORE 变量和find 命令,需要的朋友可以参考下
      2014-06-06
    • Shell脚本实现监视指定进程的运行状态

      Shell脚本实现监视指定进程的运行状态

      这篇文章主要介绍了Shell脚本实现监视指定进程的运行状态,本文直接给出脚本代码,需要的朋友可以参考下
      2015-07-07
    • Shell 管道及执行顺序分析

      Shell 管道及执行顺序分析

      Shell 管道及执行顺序分析,需要的朋友可以参考下
      2013-01-01
    • hbase-shell批量命令执行脚本的方法

      hbase-shell批量命令执行脚本的方法

      今天小编就为大家分享一篇hbase-shell批量命令执行脚本的方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
      2018-06-06
    • Shell脚本编程30分钟入门(小结)

      Shell脚本编程30分钟入门(小结)

      这篇文章主要介绍了Shell脚本编程30分钟入门(小结),小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
      2019-05-05

    最新评论

  • 在庆祝海南建省办经济特区30周年大会上的讲话 2019-10-07
  • 俄罗斯世界杯F组:球迷风采 2019-09-24
  • 彭于晏廖凡曝姜文“精神洁癖” 2019-09-24
  • 苏州大学研究生支教团网上众筹资助留守儿童 2019-09-23
  • 湖北政务微信排行榜第187期出炉 交警类公号表现亮眼 2019-09-19
  • 【奋斗吧2018】风电检修工——荒原上的“听风者” 2019-08-31
  • 母亲节又送康乃馨?送这样的健康佳品才走心 2019-08-30
  • [酷]此文已经把马克思理论、边际理论、人类需求层次理论、生物学理论、心理学理论、社会管理学理论等理论在哲学层面完美融合了! 2019-08-26
  • 兰芝雪纱修颜气垫隔离霜 2019-07-27
  • “鹊桥”中继星顺利进入使命轨道运行 2019-07-27
  • 超越舆情管理的360度信息决策 2019-07-22
  • 视频陶然居变形记:从路边小饭馆到全国餐饮十强 2019-07-21
  • 防震减灾事业发展的重要理论成果 2019-07-20
  • 珠宝配美人!李冰冰大片衣着性感秀身段 2019-07-20
  • 机器人也能拥有“情商”?这个可以有 2019-07-19
  • ag我刚开始赢几万后面全输了 21点游戏官方下载 北京pk是最稳全天计划 重庆老时时彩 时时彩买9码概率 后三不定位2胆的技巧 澳门三个骰子出点规律 怎么投注世界杯 买球 老时时彩历史开奖记录