首页 人工智能元宇宙大数据 企业智能化 智慧城市 科技 商务
当前位置:首页 > 大数据

XL-LightHouse 2.1.9 发布,轻松实现大数据实时统计

来源:新闻资讯-开源中国 发布日期:2024-05-06

升级内容:

1、增加client模块统计数据查询RPC接口; 2、增加数据备份和数据导入功能; 3、增加时区参数配置; 4、修改了几个前端页面展示问题;

一键部署,一行代码接入,无需大数据研发运维经验,轻松实现海量数据实时统计!

XL-LightHouse 是针对繁杂的数据统计需求而开发的一套集成了数据写入、数据运算和数据可视化等一系列功能,支持超大数据量,支持超高并发的【通用型流式大数据统计系统】。

XL-LightHouse 目前已涵盖了各种流式数据统计场景,包括 count、sum、max、min、avg、distinct、topN/lastN 等多种运算,支持多维度计算,支持分钟级、小时级、天级多个时间粒度的统计,支持自定义统计周期的配置。

XL-LightHouse 内置丰富的转化类函数、支持表达式解析,可以满足各种复杂的条件筛选和逻辑判断。

XL-LightHouse 提供了完善的可视化查询功能,对外提供 API 查询接口,此外还包括数据指标管理、权限管理、统计限流等多种功能。

XL-LightHouse 支持时序性数据的存储和查询。

项目特点

通用型流式数据统计或许是唯一一种有可能支撑百万量级数据指标,而成本仍可控制在企业可承受范围之内的技术。目前业内广泛采用的以实时计算、离线计算、OLAP 为主的技术方案都太过于臃肿和笨重,如果替换为以通用型流式数据统计为主,以其他技术方案为辅的实现方式可大幅降低企业成本。XL-LightHouse 期望使用更为轻巧和实用的技术方案应对繁琐的数据统计问题。

XL-LightHouse 可以短时间内快速实现庞大量级数据指标,而这是 Flink、Spark、ClickHouse、Doris 之类技术所不能比拟的;

一套系统三种用途,可作为:通用型流式大数据统计系统、数据指标管理系统和数据指标可视化系统。

对单个流式统计场景的数据量无限制,可以非常庞大,也可以非常稀少,既可以使用它完成十亿级用户量 APP 的 DAU 统计、十几万台服务器的运维监控、一线互联网大厂数据量级的日志统计、也可以用它来统计一天只有零星几次的接口调用量、耗时状况;

支持高并发查询统计结果;

轻量级使用,一键部署、一行代码接入、普通工程人员即可轻松驾驭;

可以用来做什么?

XL-LightHouse可应用在企业生产的众多环节,可以帮助职场人从容应对大量琐碎、重复性的数据统计工作,减少不必要的时间浪费,量化工作产出,提高工作效率。

以电商企业来说:

可以为企业决策层提供其所关注的平台交易额、交易量、下单用户数、订单平均金额等指标;

可以为产品经理提供其所负责产品模块的pv、uv和点击率等指标;

可以为运营人员提供关注的拉新用户量,站内广告点击量、点击收益等指标;

可以为开发人员提供其关注的接口调用量、异常量、耗时情况等指标;

可以为算法工程师提供其关注的模型训练时长、模型准确率,模型上线后的效果评测等指标;

可以为运维人员提供其关注的是线上集群的CPU、内存、负载状况等监控指标;

可以为UI设计师提供其关注的不同设计方案的点击转化对比情况;

可以为数据分析师提供各种数据指标来更准确的判断业务的短板、业务的走势、辅助决策层有针对性的制定营销计划;

项目地址

https://github.com/xl-xueling/xl-lighthouse.git

https://gitee.com/xl-xueling/xl-lighthouse.git

演示站点

演示站点:http://119.91.203.220:19232/ 测试账号:admin,密码:123456

部分功能预览

本站新闻禁止未经授权转载,违者依法追究相关法律责任。授权请联系:oscbianji#oschina.cn

本文标题:XL-LightHouse 2.1.9 发布,轻松实现大数据实时统计

本文地址:https://www.oschina.net/news/290953/xl-lighthouse-2-1-9-released

就是原本是由法国那边母公司维护的,因为俄乌原因没法维护了,现在华为接收了在俄员工,现在由华为维护。这句“主动与俄管子社区对接沟通,将绝大多数研发人员打包收编到华为俄研所,接管了该子社区管理工作,让停顿的技术维护和代码更新工作得以恢复,同时子社区继续保持完全开放状态,接纳全球开发者的使用、检视和评价。”

自举?别乱用这个词,只有编程语言可以自举,一个编辑器开玩笑哦么?用编辑器开发编辑器叫自举?那 Windows 是最强大的自举,用 Windows 开发 Windows?哈哈哈

在软件开发中,"自举"通常指的是一种软件工程技术,即使用该软件本身(或者类似的工具)来构建、测试和部署自身的过程。这种过程有助于确保软件本身能够正常运行,并且能够不断改进和更新。 因此,如果一个集成开发环境(IDE)是通过使用自身来开发、测试和部署自身的话,那么可以说该IDE是自举的,并且这个词也不局限于软件领域。 不能因为你搞D语言,只听过语言自举,就觉得只能用在语言上面。

庆祝五一劳动节的活动可追溯至1918年。一些知识分子在上海、苏州等地散发介绍五一劳动节的传单,将“劳工权利”、“劳工尊严”、“劳工神圣”等全新的观念引入中国。 1920年5月1日,北京、上海、广州等城市的工人走上街头举行了声势浩大的YXJH,争取8小时工作日,主题就是“劳工神圣”。 清华大学孙立平教授曾说:余生要做一件事,就是搞清楚是谁第一个把”国际劳工节”翻译成了”国际劳动节”。 商鞅的御民五术里有一个就是疲民,只有让老百姓总是有做不完的事,他们才没有时间取想其他的事情。更有利于统治! 繁重的劳动不仅能摧毁一个人的身体,更能毁灭一个人的尊严!一身尘士,一身汗味的人,生活是卑微的,劳动只是为了活下去,仅此而已劳动与光荣无关! 繁重的劳动还会让人的大脑停止独立思考,只想谋生。所谓人类进步,唯一的直观标准就是:工作时间越来越短生活时间越来越长。 一切与此相反的,不管说得多么天花乱坠,皆为骗局!

还有一点很重要,你的文章所有权不一定属于你,正如短视频平台的视频所有权不属于作者而属于平台,微信个人用户信息不属于用户而属于微信平台(这也是腾讯和字节跳动对簿公堂的直接原因),至于这些所有权为啥不属于用户,因为你在使用平台时即占用了平台资源,而且当你成为平台用户时都有平台协议,一旦同意即表示你放弃所有或部分所有权。

你的技术文章在你发布到CSDN上时如果没有正当声明,你的文章所有权不一定属于你,而且别人用平台的资源获利超700万,其他人用你的文章获利超过金额阈值即可立案,是否达到这个金额阈值那就得你自己提供证据了,如果你只是发发牢骚不去实践那就没辙了,你不可能等着别人替你维护你的利益。

如果是计算数据库存储性能和ORM就没太多关联了,这里测试的是不同ORM转换到可以执行的sql,或者是将查询出来的结果转换成对应对象测试,从结果可以看出不同ORM转换效率不尽相同存在差异