{"repo":"xl-xueling/xl-lighthouse","free":true,"listed":false,"github":"https://github.com/xl-xueling/xl-lighthouse","clone":"git clone https://github.com/xl-xueling/xl-lighthouse.git","description":"新一代全景式实时业务监控系统，承载1000万个监控项，每天可高效处理5000亿条消息。XL-LightHouse是一套支持超大数据量、支持超高并发的实时业务指标监控系统【同时支持单机版】。常见的应用场景包括：PV、UV统计；电商销售额、下单用户数统计；日志量统计；接口调用量、异常量、耗时情况统计；服务器运维监控等功能，系统支持多维度统计，支持各种复杂的条件筛选和逻辑判断，一键部署，一行代码接入，轻松实现业务全链路数据监控，帮助企业快速搭建数据指标监控体系。","language":"Java","stars":384,"topics":["analytics","big-data","clickhouse","flink","statistics","digital-solutions","spark"],"license":"Apache-2.0","category":"analytics","readme_excerpt":"新一代全景式实时业务监控系统，即时掌控业务运行状态，全面提升业务驾驭能力。 并行承载1000万个数据指标，每天处理5000亿条消息。 除大数据版本外，同时支持单机版！ 概述 XL-LightHouse是针对企业繁杂的数据统计需求而开发的一套集成了数据写入、数据运算和数据可视化等一系列功能，支持超大数据量，支持超高并发的实时业务监控系统。 目前已涵盖各种流式数据统计场景，包括count、sum、max、min、avg、distinct、topN/lastN等多种运算，支持多维度计算，支持分钟级、小时级、天级多种时间粒度的统计，支持自定义统计周期的配置。 内置丰富的转化类函数、支持表达式解析，可以满足各种复杂的条件筛选和逻辑判断。 提供了完善的可视化查询功能，对外提供API查询接口，此外还包括数据指标管理、权限管理、统计限流等多种功能。 支持时序性数据的存储和查询。 项目特点 + 基于通用型流式数据统计技术实现，依据流式统计运算特点设计，对每一种运算单元进行反复优化，使得每一种运算可以以非常低的成本，无限制复用； + 可以短时间实现庞大量级数据指标，低成本触达每一个细微的产品模块，而这是Flink、Spark、ClickHouse、Doris、Prometheus、时序数据库等之类技术所不能比拟的； + 对单个流式统计场景的数据量无限制，可以非常庞大，也可以非常稀少，既可以使用它完成十亿级用户量APP的DAU统计、几十万台服务器的运维监控、一线互联网大厂数据量级的日志统计、一线电商企业的订单统计、也可以用它统计只有零星几次的接口调用量、耗时状况。 + 与同领域其他技术方案不同，XL-Lighthouse擅长应对繁杂的数据统计需求，业务场景越多、数据指标需求越多，XL-LightHouse的优势就越明显； + 有完善的API，支持高并发查询统计结果； + 支持数据自动备份、可以一键导入历史数据、可以方便执行集群扩容/缩容； + 前端基于最新版ArcoDesign(React版本)开发，页面清爽大气，操作体验良好； + 轻量级使用、部署运维和数据接入不需要大数据相关经验，普通工程人员即可轻松驾驭； 可以用来做什么？ 可应用在企业生产众多环节，面向企业至上而下所有职能人员使用，以电商企业来说： + 可以为企业决策层提供其关注的平台交易额、交易量、下单用户数、订单平均金额、人均消费金额等指标； + 可以为产品经理提供其所负责产品模块的pv、uv和点击率等指标，只要有业务需要，xl-lighthouse可以计算app内每一个按钮、表单、列表、icon、搜索框等的用户行为统计指标； + 可以为运营人员提供关注的拉新用户量、各访问渠道用户量、站内各个广告位的点击量、点击用户数、点击收益等指标； + 可以为开发人员提供其关注的接口调用量、异常量、耗时情况等指标，可以辅助进行压力测试； + 可以为算法工程师提供其关注的模型训练时长、模型上线后的效果评测等指标，可以辅助进行ABTest； + 可以为运维人员提供其关注的是线上集群的CPU、内存、负载状况、IO等监控指标； + 可以为UI设计师提供其关注的不同设计方案的点击转化对比情况； + 可以为数据分析师提供全面的数据指标更准确判断业务短板、业务走势、辅助决策层有针对性制定营销计划； + 可以为销售主管提供其关注的每个下属的营销电话量、营销平均通话时长等指标； + 可以轻松实现对各类复杂业务逻辑各主要环节的数据监控，及时发现问题并辅助问题排查。 + 可以快速建立数据指标之间的交叉验证体系，轻松佐证数据指标的准确性。 针","default_branch":null,"files":null,"tree":[],"storefront":"/r/xl-xueling","claimed":false,"request_supported":{"post":"https://gitbuyer.com/r/xl-xueling/xl-lighthouse/request-supported","requests":0},"note":"indexed from public GitHub; nothing is for sale on this page. Clone it from GitHub. Paid listings live at /search."}