位置: 编程技术 - 正文

MySQL 与 Elasticsearch 数据不对称问题解决办法

编辑:rootadmin

推荐整理分享MySQL 与 Elasticsearch 数据不对称问题解决办法,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

MySQL 与 Elasticsearch 数据不对称问题解决办法

jdbc-input-plugin 只能实现数据库的追加,对于 elasticsearch 增量写入,但经常jdbc源一端的数据库可能会做数据库删除或者更新操作。这样一来数据库与搜索引擎的数据库就出现了不对称的情况。

当然你如果有开发团队可以写程序在删除或者更新的时候同步对搜索引擎操作。如果你没有这个能力,可以尝试下面的方法。

这里有一个数据表 article , mtime 字段定义了 ON UPDATE CURRENT_TIMESTAMP 所以每次更新mtime的时间都会变化

logstash 增加 mtime 的查询规则

MySQL 与 Elasticsearch 数据不对称问题解决办法

创建回收站表,这个事用于解决数据库删除,或者禁用 status = 'N' 这种情况的。

为 article 表创建触发器

接下来我们需要写一个简单地 Shell 每分钟运行一次,从 elasticsearch_trash 数据表中取出数据,然后使用 curl 命令调用 elasticsearch restful 接口,删除被收回的数据。

你还可以开发相关的程序,这里提供一个 Spring boot 定时任务例子。

实体

仓库

定时任务

Spring boot 启动主程序。

标签: MySQL 与 Elasticsearch 数据不对称问题解决办法

本文链接地址:https://www.jiuchutong.com/biancheng/348717.html 转载请保留说明!

上一篇:MySQL5.7.03 更换高版本到MySQL 5.7.17安装过程及发现问题解决方案(mysql改造)

下一篇:mysql中url时区的陷阱该如何规避详解(数据库时区与url连接设置的时区)

  • 山东省增值税发票勾选认证平台
  • 计提印花税会计凭证怎么做
  • 增值税发票记账联和抵扣联都丢了怎么办
  • 增值税发票如何作废流程
  • 零申报是不是什么都不用填
  • 为什么要结转发出材料成本差异
  • 个人代开普票需要交个人所得税吗
  • 发货就要开票吗是真的吗
  • 企业所得税1季度申报季初从业人数个税所属期12月
  • 房地产企业会计制度
  • 增值税当月抵扣吗
  • 银行定期存款取钱需要本人吗
  • 总公司委托分公司开票的委托书
  • 营改增广告标牌制作的税务怎么处理
  • 建筑业红字发票备注
  • 外购材料委托加工分录
  • 平行登记要求总账
  • 企业之间利息收入怎么做账
  • 劳务报酬个人所得税怎么计算
  • 税务行业软件
  • 固定资产停止使用还计提折旧吗
  • 自己从自己公司直接拿钱是犯罪吗知乎
  • 劳务外包与劳务派遣公司
  • 代理运费进项税额抵扣
  • 小型微利企业的条件
  • 企业收到现金支票
  • 企业所得税什么时候交
  • phppost带cookie提交
  • remind32.exe - remind32是什么进程 有什么用
  • os x yosemite dp5下载地址 os x 10.10 dp5更新内容
  • php和数据库
  • 进货的折扣该怎么算
  • 固定资产更新改造支出资本化
  • 应付票据可能涉及的科目
  • 增值税专用发票上注明的价款含税吗
  • 蛇形矩阵找数的位置
  • php 图片
  • uniapp和vue混合开发
  • 小程序开发要钱吗
  • php绘制图形函数
  • phpcms手机端
  • 投资收益如何记账
  • 分公司财务核算独立不独立
  • 企业用户怎么在电脑登录
  • 金税盘税局端系统响应错误怎么解决
  • 在建工程可以核酸无形资产
  • python缺省函数
  • 航天信息服务费280元会计处理
  • 新会计准则股权投资
  • 毛利润和纯利润
  • 固定资产加速折旧计算方法
  • 所得税汇算清缴退税会计分录怎么做
  • 分配水电费会计科目
  • 消费税是指怎样的收入
  • 公司法人的车辆给公司用可以报销费用吗
  • 为什么生产成本不属于损益类科目
  • 公司发放工作服怎么做账务处理
  • 财产租赁所得是指
  • 火车票抵扣进项税怎么申报
  • mysqlbinlog -vvv
  • windows启动失败是怎么回事
  • iptables配置文件详解
  • win7那些自启可以禁用
  • win10临时文件设置
  • linux根文件系统直接解压到硬盘
  • win8.1系统升级win10
  • Javascript之BOM(window对象)详解
  • node.js gui
  • qq仿ios
  • cocos2dx4.0教程
  • jQuery Easyui datagrid行内实现【添加】、【编辑】、【上移】、【下移】
  • javascript闭包详解
  • unity shader lerp
  • 基于javascript的毕业设计选题
  • 超级给力的好人有哪些
  • Unity 中WWW加载 AssetBundle---中文路径
  • 北京电子税务
  • 小规模纳税人可以开增值税专用发票吗
  • 小规模纳税人销售额怎么算
  • 关注龙江医保
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设