Eagle – 来自eBay的分布式实时监控及预警框架 (eagle–eyed)

技术教程 2025-05-07 09:22:15 浏览次

Eagle – 来自eBay的分布式实时监控及预警框架

2015-07-28 15:51:45Eagle 是来自eBay的面向大型分布式系统比如Hadoop, Spark 以及Cloud等设计的通用实时监控与与预警框架。主要由基础的核心框架以及针对不同应用领域的诸多app组成,专注于解决大数据时代大型分布式系统自身监控这个复杂的大数据问题，具有高扩展性，高实时性，以及高可用性等特点，同时支持使用机器学习为复杂情况提供预测分析。

Eagle 是来自eBay的面向大型分布式系统比如Hadoop, Spark 以及Cloud等设计的通用实时监控与与预警框架。

Eagle主要由基础的核心框架以及针对不同应用领域的诸多app组成,专注于解决大数据时代大型分布式系统自身监控这个复杂的大数据问题，具有高扩展性，高实时性，以及高可用性等特点，同时支持使用机器学习为复杂情况提供预测分析。

Eagle核心框架提供实时监控系统开发过程中所需要的大部分重要基础组件，例如：

轻量级分布式流处理框架 ：以DAG为基础模型对通用流处理范式进行抽象，在开发期用户只需基于DSL API定义监控程序的流式处理逻辑，运行期再选择实际物理执行环境，默认支持单进程和Storm，同时也支持对于其他执行环境的扩展，比如Spark Streaming 或者 Flink等。

实时流聚合引擎 ：提供简单易用的实时流聚合规则定义语法，元数据驱动，动态部署，实现线性扩展的实时监控数据流聚合。

分布式Policy引擎 ：分布式实时预警规则执行引擎，提供类SQL的描述性规则定义语法以及机器学习自动等多种扩展，支持预警规则的动态加载和分区。

存储和查询框架 ：通用监控数据存储框架，可用于存储和查询日志，指标，警报，事件等多种类型数据，默认支持HBase，并针对HBase进行多种优化和扩展，比如coprocesser，二级索引以及分区等，也支持其他存储类型的扩展比如RDBMS等，并提供通用的ORM, REST API以及易用强大的类SQL查询语法。

可定制化监控报表 ：提供类Notebook的交互式实时可视化分析，也支持进一步选取部分图标，并定义布局保存为dashboard以供分享或者持续监控。

Eagle 针对不同的应用场景提供多种上层应用，例如

: 实时监控Hadoop 或者 Spark等平台上的作业当前和历史执行状态，提供多维度不同粒度的性能分析，支持多种异常预警和性能警告，比如作业运行时间过长，读写过慢，数据倾斜，失败任务比率过多等，可有效在作业无法满足SLA之前提供预警和性能建议，同时结合机器学习模型，基于任务分布或指标变化等协同预测任务或者服务器节点等可能潜在的异常，并集成Remediation系统对系统进行自动修复。

：实时监控用户行为，以保证数据安全,支持HDFS, HIVE等不同数据类型，提供简单高效的数据流接入Plugin，支持简单规则定义语法，结合机器学习算法对用户行为建模(User Profiling)，自动探测异常用户行为，可集成Dataguides等对敏感数据进行监控，也可集成Apache Ranger等对异常用户行为进行限制。

此外，Eagle 支持以Ambari Plugin等方式方便地安装和集成到现有集群中，并提供友好的用户界面进行管理。

推动式供应链的生产方式是

推动式生产是指按照MRP的计算逻辑，各个部门都是按照公司规定的生产计划进行生产。上工序无需为下工序负责，生产出产品后按照计划把产品送达后工序即可，这种方式称之为推动式生产

汽车轮胎怎么保养最好？

简单来说。 1，平时保养。主要是清除车胎内缝隙的石子。轮胎之所以有花纹。是为了在有雨水路面行驶时。排水的。光头胎的抓地力最好。但是有雨水就会打滑，所以不要让异物填满车胎缝隙。 2，一般情况下。家用轿车不用频繁换气。每个季度做一次胎压检查就可以了。 3，冬夏季汽车轮胎胎压的气压值，因车而议。最好去看自己车辆出厂的保养手册。那个比较实用与自己的车型4，跑高速时胎面会发白的原因。车胎都是橡胶制品。一般都是黑色，不会自己发白。大概的主要原因是路面问题。水泥路面或者尘土的附着都有可能会改变胎面颜色。针对你所提的问题。回答这些。供您参考所用。