立项背景&目标:
1.通过优化的架构和流程,打通云端和本地数据连接,提高LSEG内部不同金融产品的自动化
2.持续优化产品用户的工作效率,降低人力成本
3.通过ETL,NLP,ML等工具和技术,持续优化数据质量
业务流程:
1.通过Boomi订阅SNS获取产品的云端数据,通过规则提取数据,存放到AWS S3
2.通过其他组件如格式转化等,进一步提取数据,进行NLP,ML等数据优化,存放到AWS S3
3.业务端通过产品界面识别文档关键词句信息,再次利用Boomi进行标准化和数据质量审核
4.合格的业务数据存放到本地数据库
本人负责项目范围&模块:
1.云端数据的订阅,获取,检查&云存储,以及最后传送到本地数据库
2.确认ESG业务数据规则,制定自动化流程,进行ETL
3.NLP数据标签分析,确认及区分Boomi和ML的数据工作范围
难点&解决方案:
1.对20多个利益相关者(包括解决方案架构师、产品所有者和指导委员会成员)进行全面分析,覆盖5个以上时区(中国、英国、以色列、印度、菲律宾等),从大规模项目交付的角度识别关键需求。
2.制定与全球战略和产品路标相一致的项目增量计划。组织推动并协调敏捷开发会议及其他会议,确保项目方向一致并实现敏捷进展。
3.远程对接不同国家地区的架构师,开发,测试等团队,通过敏捷的方式进行业务计划,评审,回顾,确保满足客户要求。