程序聚合 软件案例 某大企业数据中台

某大企业数据中台

2025-11-07 22:45:21
行业:电商、企业内部管理
载体:网站、框架或代码包
技术:Java、Spring Boot、Vue、Spring Cloud

业务和功能介绍

1、立项背景:由于公司各个子公司数据比较混乱,并且公司需要从传统行业向互联网电商行业转型,需要统一数据接口、流程、用户中心、开放平台等等基础架构建设。
2、功能介绍
- 数据中台由多个微服务组成,其中包含门户、权限中心、数据治理一体化、API开放平台、BI报表、流程管理等多个模块。
- 其中权限中心基于多租户概念设计,采用多角色管理复杂的功能权限及数据权限。BI则采用独有的自研资源权限进行数据报表控权。
- API开放平台则可以配置多种数据来源,其中包含mysql、tidb、es、mongodb等多种主流数据库和常规三方API接口,如企业微信API、三大运营商API、公司内容系统对接等。

项目实现

1、整体架构采用springcloud微服务主流架构,采用nginx进行统一接收代理转发,后端使用spring gateway作为统一后台网关入口设置限流、控权、动态权限等实现。注册中心使用nacos2.0进行管理微服务。
2、微服务本身使用springboot进行开发,数据库使用mysql\tidb等主流数据库作为业务数据存储。日志数据使用的是clickhouse进行存储。
3、脚手架全自研,其中包含各种基础组件封装,如日志模块,使用kafka+clickhouse实现日志异步记录,使用aop方式进行日志链式跟踪,封装雪花算法,修改原有算法使logId更加具有实践属性,可以通过logId判断异常在什么时间段发生。权限动态拼接模块,使用jsqlparser进行动态sql解析,其中基于源码进行修改,解决大数据数据库语法不兼容问题等等等等。

示例图片视频


Zach
30天前活跃
方向: 后端-Java、爬虫/脚本-爬虫/脚本、
交付率:100.00%
相似推荐
quick_server
1、背景和目标:对企业所有服务请求进行轻量级安全和速度优化,减轻服务器的并发压力。 2、quick_server系统,不依赖外部引用,即插即用,主要用来进行极速快捷安全的http请求。大大减轻服务器的并发压力。轻松实现高并发场景下极速快捷安全的http请求。
json解析转换器
1、背景和目标:一、超级快速、安全对json的解析与对象转换;二、支持分布式超高并发 2、json解析转换器,支持分布式高并发,支持百万级别访问。用于快速进行json的解析与对象转换。原有的开源工具,要么安全性不够,要么性能不够强悍,要么不支持定制,很难满足企业日益严苛的业务需求。开发的这个json解析转换器,可以同时满足以上三种需求。
消息中心
1、背景和目标:解决高并发,对外提供统一的消息处理业务 2、功能模块介绍:六大功能模块:http通讯模块、缓存模块、消息队列模块、消息重试中心模块、消息调度模块、公共模块;对外百万级别并发项目,TPS可达1000/s。作为中间件,对外提供统一的消息处理业务。所有系统,包括电子签章平台、一照通行平台、一网通办平台,消息的请求和处理都经过消息中心。轻松实现异步、解耦、削峰。 3、功能描述:支持企业所有的内部系统接入,包括电子签章平台、一照通行平台、一网通办平台。轻松实现异步、解耦、削峰。
CRM客户管理后台
立项背景:针对中小型企业客户信息分散、销售跟进过程不透明、合同管理混乱等痛点,旨在打造一个轻量级的客户全生命周期管理后台,提升销售团队协作与转化效率。 核心功能:涵盖管理员登录鉴权、客户主表管理、联系人维护、跟进记录追踪、合同管理等六大模块。支持客户信息分页查询、关键字搜索、新增编辑与逻辑删除;客户详情页以名片形式集中展示联系人、跟进记录及关联合同。 业务流程:从潜在客户录入,到日常跟进记录,再到最终合同签订与操作日志审计,覆盖完整的销售业务闭环。
个人记账与资产管理平台
本项目是一套从零搭建的全栈个人财务管理平台,目标是替代功能单一的记账工具,把日常记账、资金账户、借贷往来、预算控制、资产盘点收敛到一个数据自主的系统中。系统由 12 个业务模块、23 个控制器、170 个 REST 接口、36 张数据表构成:记账核心支持三级分类树、商家联想、多平台支付与 CSV 批量导入导出,每笔账单自动联动账户余额并留存流水日志;借贷模块实现未结清 / 已结清 / 已放弃三态模型,支持分期还款与坏账核销;预算模块提供月度 + 年度双层体系与阶梯式执行规则;资产模块通过快照与趋势图呈现净资产变化;报表模块支持从月度 / 年度报表下钻到分类明细。系统还包含完整 RBAC 权限体系、软删除回收站、8 套主题实时切换与中英双语国际化。核心业务流程为:记一笔 → 余额幂等联动 → 报表与预算同步更新;借据从创建、关联账单凭证、分期还款到三态判定的完整生命周期;以及登录后由后端菜单树动态生成侧边菜单、路由与区块双重门控的权限链路。
帮助文档   Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服