标签: 大数据

所有带有标签 "大数据".

• 使用Elasticsearch代替数据库like以加快查询的各种技术方案+实现细节

  2026年4月21日

  以海量订单查询为例，使用Elasticsearch替代联系人信息的数据库LIKE模糊查询，再回查数据库获取订单。介绍索引设计、历史与增量数据同步、UTC时间处理、分页优化，以及查询回退和同步差异的处理思路。

• 在业务开发中使用ElasticSearch的指导手册+附真实业务优化ElasticSearch场景

  2024年5月26日

  整理业务开发中使用Elasticsearch的检查要点，包括分词验证、字段映射、索引规划、生命周期和容量评估。结合真实日志业务，记录清理与写入引发的性能问题，以及Data Stream、熔断和批量处理等优化思路。

• 跟着官方文档一步一步搭建Elastic Stack（3节点ES集群+Kibana+Filebeat+Metricbeat）+ 零停机由单节点切换到集群解决方案

  2024年3月21日

  使用Docker Compose搭建包含三节点Elasticsearch集群、Kibana、Filebeat和Metricbeat的Elastic Stack，说明TLS与监控配置。结合生产环境迁移经历，讨论通过域名切换、数据迁移和连接验证完成单机到集群过渡的步骤。

• Kafka（六）利用Kafka Connect+Debezium通过CDC方式将Oracle数据库的数据同步至PostgreSQL中以及实现缓存一致性

  2023年12月2日

  介绍CDC的基本思路，并通过Kafka Connect和Debezium示例，将Oracle数据同步到PostgreSQL。讨论数据库同步、Elasticsearch数据导入及缓存一致性等场景，并比较不同方案的适用条件。