• 机器人也能拥有“情商”?这个可以有 2019-07-19
  • 重庆“轮椅教师”高位截瘫仍坚守讲台 2019-07-07
  • 百度车联网携手宝马 合作伙伴全面升级为国际OEM厂商 2019-07-01
  • 全面从严治党永远在路上——辽宁代表团开放日侧记 2019-07-01
  • 【学习时刻】华侨大学黄日涵:“一带一路”盛会开启合作发展新篇章 2019-06-24
  • 秒变迷弟!吴建豪晒与甄子丹合影:偶像给我签名 2019-06-20
  • 军统头目戴笠留下哪些巨额遗产 令蒋介石身边人惊诧 2019-06-20
  • 初春喝藿香汤 解表化湿,散寒温经 2019-06-18
  • 新华时评:磋商,不等于反复折腾 2019-06-09
  • 天山特克斯峡谷 中国国家地理网 2019-06-08
  • 端午小长假珠海口岸将迎双向客流高峰 2019-06-08
  • 王朝崩塌!恒大半个月内双线出局 卡帅敲响下课警钟 2019-06-07
  • 一周人事:国务院发布任免刘伟当选北京市总工会主席 2019-06-07
  • 敞篷式设计 日产聆风Open Car官图发布 2019-06-06
  • 习近平为传统文化“代言” 2019-06-05
  • 香港赛马会绝杀2肖:shell脚本批量删除es索引的方法

    香港赛马会网站惠泽社绝杀八码 www.mwcrz.tw  更新时间:2019年03月15日 08:32:41   作者:Scub   我要评论

    今天小编就为大家分享一篇关于shell脚本批量删除es索引的方法,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧

    发现elasticsearch集群的状态是red,unassign的分片数很多,看了下都是些旧的日期的索引(应该是定时任务删除失败导致的)。

    curl -XGET ip:port/_cat/shards | grep UNASSIGNED

    数量有几百个,写个脚本处理下,先恢复成green。red状态好像会影响索引创建和数据迁移

    先把需要删除的索引导出到文件

    curl -XGET ip:port/_cat/shards | grep UNASSIGNED >> needDelIndex.txt

    确认下要删除的索引列表。没问题就执行下面删除shell(es的ip和端口需要修改下)

    #!/bin/bash
    echo "$1"
    esUrl=${esip}:${esport}
    indexfile=needDelIndex.txt
    #cp -f /dev/null ${indexfile}
    #curl -XGET ip:port/_cat/shards | grep UNASSIGNED >> needDelIndex.txt
    if [ ! -f ./${indexfile} ]; then
      echo $indexfile not exists
      exit 0
    fi
    logfile=esindex_del.`date +"%m-%d"`.log
    cp -f /dev/null ${logfile}
    lastIndexName="test"
    for item in `cat ${indexfile} | awk '{print $1}'`
    do
      if [ "$item" = "error" ]
      then
        continue
      fi
      if [ "$item" != "$lastIndexName" ]
      then
        curl -XDELETE ${esUrl}/${item} >> ${logfile}
        echo ---------${item} `date` >> ${logfile}
        sleep 5
      fi
      lastIndexName=${item}
    done

    因为我们的索引是按天创建的,索引名前缀是yyyy-MM-dd, 保留一段时间后需要批量删除。shell的第一个参数为yyyy-MM-dd,将删除该天及以前的旧索引

    #!/bin/bash
    esUrl=${esip}:${esport}
    echo "$1"
    if [ $# -ge 1 ]
    then
      deleteDate=$1
    else
      echo "please inpust detete esindex's date(yyyy-MM-dd)"
      exit 0
    fi
    indexfile=esindex.info
    cp -f /dev/null ${indexfile}
    curl '${esUrl}/_cat/indices' >> ${indexfile}
    logfile=esindex_del.`date +"%m-%d"`.out
    cp -f /dev/null ${logfile}
    for item in `cat ${indexfile} | awk '{print $3}'`
    do
      if [ "$item" = "error" ]
      then
        continue
      fi
      parameter=${esUrl}/${item}
      indexdate=${item:0:10}
      if [ "$indexdate" = "$deleteDate" ]
      then
        curl -XDELETE ${parameter} >> ${logfile}
        echo ---------${item} >> ${logfile}
        sleep 5
      elif [[ "$indexdate" < "$deleteDate" ]]
      then
        curl -XDELETE ${parameter} >> ${logfile}
        echo ---------${item} >> ${logfile}
        sleep 5
      fi
    done

    总结

    以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对脚本之家的支持。如果你想了解更多相关内容请查看下面相关链接

    相关文章

    最新评论

  • 机器人也能拥有“情商”?这个可以有 2019-07-19
  • 重庆“轮椅教师”高位截瘫仍坚守讲台 2019-07-07
  • 百度车联网携手宝马 合作伙伴全面升级为国际OEM厂商 2019-07-01
  • 全面从严治党永远在路上——辽宁代表团开放日侧记 2019-07-01
  • 【学习时刻】华侨大学黄日涵:“一带一路”盛会开启合作发展新篇章 2019-06-24
  • 秒变迷弟!吴建豪晒与甄子丹合影:偶像给我签名 2019-06-20
  • 军统头目戴笠留下哪些巨额遗产 令蒋介石身边人惊诧 2019-06-20
  • 初春喝藿香汤 解表化湿,散寒温经 2019-06-18
  • 新华时评:磋商,不等于反复折腾 2019-06-09
  • 天山特克斯峡谷 中国国家地理网 2019-06-08
  • 端午小长假珠海口岸将迎双向客流高峰 2019-06-08
  • 王朝崩塌!恒大半个月内双线出局 卡帅敲响下课警钟 2019-06-07
  • 一周人事:国务院发布任免刘伟当选北京市总工会主席 2019-06-07
  • 敞篷式设计 日产聆风Open Car官图发布 2019-06-06
  • 习近平为传统文化“代言” 2019-06-05
  • 明星97游戏 河南快3走势图今天快3走势图 平码号码总统计 塔什干棉农vs巴格达空军 尼姆法甲 极速快乐十分是那里的 福彩3d走势图500期 海南环岛赛彩票开奖 江西多乐彩开奖 福建麻将外挂