打造自动化特征工程处理和效果监控解决方案,结合建模分析具体工作和平台建设,串联特征工程-模型研发-业务应用-效果监控,形成标准的、线上化的分析挖掘工作流程,将特征管理和监控管理功能集成到模型管理平台,以提升模型的开发效率与复用水平,指导模型项目实施落地应,以此进一步提升生产力、提高工作效率、加强业务反馈效率。
通过大数据数仓将用户数据分模块存储,划分各个不同的特征模块,通过样本提取特征,对用户数据进行按模块计算特征,最后将特征结果进行融合,支持特征筛选,特征回溯等功能。任务调度使用airflow调度平台进行调度,分步骤进行特征计算。前端页面使用vue,后端技术使用java开发,调度部分使用python和linux脚本相结合。一些计算逻辑在大数据平台上进行。