AMP平台（Application Management Platform）
2025-04-17 21:12:39
行业：搜索、内容平台
载体：云服务/云平台、网站
技术：Java、Python、Scala、React
业务和功能介绍
AMP平台是一个低代码平台，用户只需要配置Yaml 即可完成对数据的ETL功能，AMP平台集成了AWS、aliyun、tencentyun,可以做到多云随意切换。底层执行引擎为自研的Operator,支持Flink/Spark引擎，调度系统为Apache Dolphinscheduler(二开)。
1、低代码平台，配置化执行实时离线任务；
2、外部服务数据流接入，小时级接入，无需开发任务；
3、调度配置化，自定义调度配置，可；无缝衔接crontab quartz；
4、yaml 化操作，简化代码流程；
5、一键部署发布任务，实时监控告警；
6、一体化日志链路追踪，精准定位数据问题。
1、低代码平台，配置化执行实时离线任务；
2、外部服务数据流接入，小时级接入，无需开发任务；
3、调度配置化，自定义调度配置，可；无缝衔接crontab quartz；
4、yaml 化操作，简化代码流程；
5、一键部署发布任务，实时监控告警；
6、一体化日志链路追踪，精准定位数据问题。
项目实现
1、二次开发Apache Dolphinscheduler，修复Master bug、优化Worker、API等执行性能。优化UI部分 Docker打包问题，优化Memory/CPU计算问题，部署至K8s
2、移除原先平台集成AirFlow, 开发Dolphin Utils，彻底解耦原先业务，支持平台调度。
3、平台任务日志模块开发，WorkFlow与TaskFlow 日志解耦，优化服务。
4、Operator开发，支持调用AI 模型打标，优化老版本打标Operator。
5、引入Nacos，优化平台配置项服务，支持混合云部署(DNS解析转发)
2、移除原先平台集成AirFlow, 开发Dolphin Utils，彻底解耦原先业务，支持平台调度。
3、平台任务日志模块开发，WorkFlow与TaskFlow 日志解耦，优化服务。
4、Operator开发，支持调用AI 模型打标，优化老版本打标Operator。
5、引入Nacos，优化平台配置项服务，支持混合云部署(DNS解析转发)
示例图片视频
相似推荐
外汇自动化程序量化交易
外汇自动化程序量化交易，用MQL5语言实现。
核心技术
MQL5语言开发，使用布林带指标检测波动率收缩，通过挂单交易实现突破策略。采用移动止损动态保护利润，使用订单选择器管理持仓和挂单。
技术难点
多订单协调：同时管理Buy Stop和Sell Stop两个挂单，一方成交后需立即删除另一方
状态同步：持仓管理、挂单删除、移动止损之间的状态机切换复杂
止损移动精度：需判断盈利是否达到启动点，且每次移动必须超过最小步长，避免频繁修改订单
门户官网
你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好你好
校园门户
1.方便高校教师统一平台入口账号，把学校所以网站统一到门户系统，统一登陆登出，同一账号密码
2.功能主要包括统一入口，所有平台的消息汇总，代办已办事项汇总，课表信息，办事大厅，定时任务等
3.对接数据中心，实时同步数据
小程序商城
主要是为了聚焦公司老年人购买商品的需求，产生了下属模块，并且接入旺店通进行仓储物流管理，来满足需求正常的运行，项目和后续正常上线交付
商城首页
促销模块
商品详情
商品列表
会员中心等
实时电商运营数据中台-数舰 - DataBridge
立项背景是业务数据分散在多个系统，决策缺乏实时数据支撑。目标是构建统一数据中台，实现销售、库存、用户行为数据实时可视化。核心功能包括 GMV 实时监控、商品销量排行、用户画像分析、转化漏斗追踪、异常数据告警。业务流程：多源数据接入→Kafka 实时清洗→指标计算→大屏渲染→阈值告警。
帮助文档
Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服