《基于es构建实时日志检索平台ppt课件》由会员分享，可在线阅读，更多相关《基于es构建实时日志检索平台ppt课件（13页珍藏版）》请在金锄头文库上搜索。
1、基于es构建实时日志检索平台 系 JJ本到机的天人可可取轩发中从以构发申人失地及入及画拉他 本家起与可| 位户吕ke报 日志相拓放 7 Hz 央 -1一 CE 日志采集 文件监控监控文件的新塔、斑除、收改、备份事件，及时响应并生成采集任务有限资源的最大化利用: 根据文件的变更频宰动态调整采集任务的采集频率，如: 文件超过1小时未变更，则每分钟执行一次文件状态监控，文件变更频率较高的，每秒钟执行一次文件状态监控井生成采集任务文件采集采集内容的准确性: 摘要算法一文件睡一标识，在文件备份可件发生时，保证文件内容的连瑟性、准确性数据发送流量均衡: 通过统一调度中心 (统一服务) 获取流量最小的转发中
2、心地址，并将数据发送到该转发中心，确保各转发中心的流量均衡。 JR志转发转发中心: 日志生产方与日志消费方的桥梁四种发送策略基于日志分类的流量均衡发送RE 的人的人才有 基于IP地址的并发发送 货，比如: UMP的JVM 支持将一份数据同时转发到多个消费方接收器) 转发， 基于地址的轮询发送 让o 向接收器的所有IP轮询发送数据， = nn如昌某P丰可用，将被角除轮;队列等到监测OK后，义白动添 胃广 RE加到花误发遂数据jP队区中，卫如UMP心跨数据 - 本 同一种数据并发发送到 和 er at 引贺医 志搜索9一人一一源日去 应用索引策略: 减少日志创建索引压力的有效手段按应用所属的系统级别定制索引策略 日志搜索国 国 国eyee 补建帘引集群11 RE和esal二而|站蜀农引| | mazg | ， | |号 Pi | 1 | ES优化内冶和族o 有限的机器资源第一个跳出来出问题是内存，Iucene查询与建索引的模块vm 分配16CG内存，经常cuf cf memory。9 优化方向:o 1.Iucene cache使用方式调整为则er cache52.gc 优化
