大数据 软件定制 案例

一、立项背景与目标 1. 立项背景 在传统的知识库问答系统中，普遍存在以下痛点： - 流程混乱：通用ReAct Agent在处理复杂业务时，容易发生步骤跳跃或逻辑错乱，导致回答质量不稳定。 - 上下文断裂：多轮对话中，用户常使用代词（如“它多少钱？”），传统向量检索缺乏指代消解能力，导致检索失败。 - 意图混杂：闲聊式提问（如“你好”）与知识检索式提问（如“XX产品参数是多少”）被统一处理，浪费算力且影响用户体验。 - 状态丢失：用户刷新页面或稍后再访问时，对话历史无法延续，每次都是“新会话”。 2. 项目目标 - 构建一个流程可控、意图可分流、上下文可理解、状态可持久的智能知识助手。 - 实现复杂业务逻辑的结构化解耦，提升系统的可维护性与稳定性。 - 显著提升多轮对话场景下的检索命中率与回答准确率。 二、软件功能与核心模块 1.整体功能概述 本系统是一个基于LLM的智能对话式知识库问答助手，支持用户通过自然语言提问，从向量知识库中精准检索并生成回答。系统特别强化了多轮对话中的指代消解能力与流程可控性。 2.核心功能模块介绍 模块名称 功能说明 Planner（规划器） 基于LLM + 专用Prompt，硬编码业务流程。负责解析用户请求，按固定流程调度执行，防止逻辑跳跃。 语义路由器 基于LLM的分类工具，动态识别用户意图为“chat”（闲聊）或“retrieval”（知识检索），实现分支分流。 历史加载与写入模块 与Redis集成，自动追加对话历史，确保跨会话的上下文连续性。 查询重写模块 结合历史对话，将存在指代或省略的用户问题（如“它多少钱？”）改写为语义完整的独立问句。 混合检索引擎 同时执行向量语义检索与关键词检索，通过RRF算法融合排序，提升召回效果。 Executor（执行器） 根据Planner的指令，调用重写、检索、生成等环节，最终输出回答。 系统流程严格遵循：语义路由 → 历史加载 → (分支判断) → 查询改写/直接回答 → 知识库检索 → 最终生成 三、业务流程与功能路径 以下为用户与系统交互的完整功能路径描述： 场景一：用户进行知识检索（多轮对话） 场景二：用户发起闲聊 场景三：用户首次访问 / 会话恢复

【项目简介】 数图新治(简称：数图)是一个政务大数据分析平台，通过算法配置、图表数据展示、汇成专题来进行数据分析、数据挖掘、成果展 示，帮助决策。数图是一个核心产品，从该产品衍生一个个智慧统计项目，部署到各个项目地。到目前为止已服务了全国三四十个 街道办、地区统计局、区政府。 【功能点】 ● 图表展示、图表下钻，用到 echarts 的大部分图表及高德地图，项目地涉及到一些客户要求的第三方地图； ●自动报告，用户点击图表生成语料并直接生成报告；用户可通过将语料、图表、图片等拖入到在线报告中，也可手动输入和增加 配置条件生成动静态文本来生成自动报告，如生成日报、周报、月报、季报、年报等；通过拖拽、富文本编辑实现 ●自由页面配置，用户通过拖拉拽实现自由页面布局及页面内容展示，实现对页面框架、图表、资源框、筛选器等的功能配置和样 式配置等 ● 支持全定制和半定制半配置的页面 ●兼容，配置的专题在 pc 、大屏、pad 、移动端使用，实现四端兼容 ●在线报表，通过配置实现自动生成报表，数据自动生成，在线编辑、保存、下载报表，通过 lucksheet 实现 ●地图，实现各种类型地图如高德、百度、客户要求的第三方地图，涉及到的业务需求如落点、标牌、下钻、框选、热力图、白 模、3D、影像地图、二维地图、聚合、图上加 echarts 图表、弹框、色块、距离计算等 ●文件下载，包括数据下载 excel ，图表下载成 word 文档、pdf 下载、报表下载等； ●文件上传，excel、txt、image、word、pdf等； ●文件预览，在线 word、pdf、excel 文档预览；

针对企业手动采集公开数据效率低、易出错的痛点，开发了这套通用合规数据采集系统。核心功能包括静态网页数据自动抓取、数据清洗去重、Excel/CSV结构化导出、批量任务调度与实时进度显示。系统全程遵守robots协议与网站访问频率限制，采用Python+Requests实现稳定请求，确保合规爬取公开数据，无需客户额外配置环境即可运行。

本系统是一套面向多源数据的可视化分析工具，基于Python数据分析生态构建，可读取结构化Excel数据源并自动生成专业级分析图表和HTML报告。 系统聚焦两大分析场景： 1. A股金融市场分析：读取沪深A股4000+只股票的实时数据，自动生成板块分布饼图、成交量Top15排行柱状图、涨跌幅分布直方图，直观展示市场结构和资金动向。针对个股（如贵州茅台600519），生 成日K线走势图并叠加MA20/MA60双均线，标注历史最高收盘价，辅助技术分析决策。 2. 豆瓣影评数据分析：读取豆瓣电影Top250完整榜单，生成评分分布直方图、评分区间占比饼图，以及年度电影数量与平均评分的双Y轴趋势图。可直观看到经典电影年代分布和评分走势。 所有图表统一采用专业配色方案，支持中文渲染，输出为高分辨率PNG图片（150 DPI）。同时自动生成一个响应式HTML分析报告页面，将所有图表嵌入精美卡片布局，包含概览统计卡片和技术指标说明，可直接用于演示汇报或嵌入Web页面。

本系统是一套面向数据分析场景的多平台数据采集工具集，包含4个独立的数据采集模块： 1. A股数据采集模块：自动采集沪深A股股票列表、历史K线数据和实时行情。数据来源于腾讯和新浪公开API，支持多数据源自动切换，单次可采集全部4000+只股票的基础信息及实时价格。 2. B站数据采集模块：采集B站热门视频排行、UP主粉丝与播放数据、关键词搜索结果。可用于内容趋势分析、UP主商业价值评估。 3. 豆瓣Top250采集模块：采集豆瓣电影Top250和书籍Top250的完整榜单，包含评分、评价人数、简介、排名等信息，支持影评分析和好书推荐场景。 4. 链家二手房采集模块：支持北京、上海、广州、深圳、成都等10个城市的二手房数据采集，包含房价、面积、户型、区域、关注度等信息，可用于房地产分析。 所有模块输出为标准Excel格式（.xlsx），同时兼容CSV导出，方便后续数据分析和可视化。系统内置请求频率控制和指数退避重试机制，确保稳定采集。

环境及框架: SpringBoot+Spring+Maven+SpringMvc+Mybatis+Auth+Redis+Solr+Postgres+Mysql+Mongodb 项目描述: 这个项目代码缺陷检测系统是由多个项目合并开发的一款高效、全面的工具，主要用于分析和检测代码中的漏洞和缺陷以及项目开源率。系统集成了 Sonarqube 工具，能够准确分析代码文件中的问题行数，并统计 Bug、异味和重复率等指标。同时，系统还集成了美国漏洞库（如 nvd、 cve、 cpe_match），开源项目库(GitLab、GitHub、Apache)、组件(Nuget、Maven)实现与项目的 集成检测，提升代码安全性和质量。 责任描述: 1、负责安装配置 Sonarqube 工具，通过 GitHub 下载源码项目并搭建源码框架 2、开发 27 种语言的技术指标语言插件，包括 JAVA、Python、C、C#、TypeScript、Go、 Groovy、T-SQL、PL/SQL 等，对源代码进行改动并集成到 Sonarqube 系统中 3、利用自动化浏览器插件 FirefoxDrive 对 Sonarqube 数据进行翻译处理 4、编写各种编程语言的被测件，确保系统能够准确扫描到各种语言的漏洞 5、设计定时任务，定期更新漏洞库数据，并引用钉钉机器人在群里通知任务进度 6、编撰指标偏移表和用户手册，提供系统操作指引和技术支持 7、查看 Bug 管理系统分配的问题，确保问题及时修复 8、迁移和维护 dm 数据库和 Postgres 数据库的数据，保障数据完整性和安全性 9、与前端团队联调接口，开发用户管理模块，提升用户体验和系统功能性

立项背景与目标：面向事件合约交易场景，解决平台历史信号与实盘记录分散、对账困难、盈亏口径不一致的问题，建立一套可持续沉淀交易数据的管理系统，支持实时查看本金、胜率、盈亏和对比结果，帮助用户评估策略在真实交易环境中的效果。 软件功能与核心模块：系统包含平台对接、实盘记录管理、对比展示、统计报表与本金管理四大模块。平台对接负责登录并抓取历史信号；实盘记录支持手动新增、编辑、删除和导入；对比展示负责将平台信号与实盘成交按时间、币种、方向匹配；统计模块负责展示当前本金、实盘/回测胜率、净盈亏、历史金额区间等核心指标。 业务流程与功能路径：用户先配置初始本金并登录平台，再同步历史信号；随后在左侧维护实盘交易记录，系统自动计算盈亏并刷新统计；筛选条件可按时间、币种、结果缩小范围，右侧同步显示平台信号与对比结果；当新增、修改或删除实盘记录时，系统会自动重算当前本金、胜率及各类统计，形成完整的“登录—同步—录入—对比—统计”闭环。

据 2020 年国际癌症研究机构（IARC）调查的最新数据显示，乳腺癌在全球女性癌症中的发病率为 24.2%，位居女性癌症的首位。在药物研发领域，利用预测模型对能够拮抗 ERα 活性的化合物进行筛选的方法受到广泛的关注，本文通过建立回归与分类预测模型，对化合物的生物活性和 ADMET 性质做多目标优化求解

本项目为外贸/电商企业打造了一套从数据采集到智能报表生成的自动化系统。立项背景是传统商业情报收集依赖人工浏览多个数据源（海关、1688、行业报告、社交媒体），耗时且容易遗漏关键信息。 核心功能模块： 1. 多源自动采集：对接海关总署公开数据、1688供应商报价、行业研报、社交媒体舆情等4大类数据源，每日自动增量抓取。 2. AI智能处理：大模型对采集内容进行分类（贸易数据/价格监控/行业研究/竞品动态）、可信度评分、关键信息抽取。 3. 竞品价格监控：7天价格走势图自动生成，突变超过阈值自动预警推送。 4. 舆情情感分析：社交媒体评论AI情感分类（正面/中性/负面），负面比例超10%触发告警。 5. 日报自动生成：每日9:00自动汇总前一天数据，生成结构化报表并通过飞书/Slack推送。 6. 可视化仪表盘：ECharts 图表展示KPI趋势、数据来源分布、处理统计等。

1. 支持上传 Excel 文件或输入网址，自动抓取网页数据并解析为结构化表格 2. 内置京东、淘宝、拼多多、1688、抖音、小红书等平台专用爬虫，自动识别平台并提取数据 3. 提供自定义 CSS 选择器功能，支持用户手动指定提取规则 4. 自动分析数据特征，推荐合适的可视化图表类型 5. 一键生成 HTML 数据分析报告，支持预览和下载

系统包含以下核心模块：① 工作台仪表盘：聚合待办、公告、关键指标图表；② 客户管理：支持客户信息录入、分级、导入导出及跟进记录；③ 订单处理：从报价、合同到发货的全流程记录；④ 审批流引擎：可配置多级审批（财务、经理、总监）；⑤ 报表中心：自动生成销售、回款、绩效报表并支持下载。各模块通过统一权限控制，实现了数据隔离与角色化视图。

目前有很多光伏制造企业想要通过数字化来提高工厂的制造效率和供应链的成本控制，因此引入了工业互联网加数据中台的概念帮助企业实现这种大数据量和高复杂度的数据分析和展示；

构筑完整系统基底，建设交通态势感知分析、智慧管控、车辆隐患管理等多个管理系统，实现对于智慧城市治理的深化探索和城市交通“智力”的提升，更为大型活动赛事提供更安全更智能更稳定的实战场景。

长江航道局水位信息爬虫，是基于Python开发的专用网络数据采集程序，主要针对长江航道局官方对外公开的各水文站点实时水位、历史水位、站点信息进行自动化抓取、解析、整理与存储。 通过模拟浏览器请求，定时采集长江沿线各水位监测站点的水情数据，替代人工手动查询、记录水位信息，实现水位数据自动化采集、实时同步、历史数据归档，为水位数据分析、水情监控、航道通航参考提供稳定数据源。

需要输入搜索字符或者对类目下的大众点评商家数据进行收集 需要的主要字段是：商家名称，商家地址，商家类目，商家卖品sku，价格等 需要对一个城市收集上面的信息 对收集到的数据进行清洗 得出在这个城市开奶茶店的预测

立项背景：电商平台商品数据分散、价格波动频繁，商家与消费者难以快速获取全面比价信息，亟需一套稳定、可扩展的自动化数据采集与分析系统。 核心功能：① 多平台商品数据定时采集（含标题、价格、库存、销量、评论）；② 数据清洗与标准化入库；③ 价格趋势可视化与竞品对比分析；④ 异常价格监控与预警通知。 业务流程：用户配置采集任务 → 系统按规则定时抓取 → 数据清洗与校验 → 存入 MySQL 数据库 → 后台可视化展示与分析 → 触发异常价格预警。

边坡稳定性是水利工程、 交通路网及露天矿山等领域的核心安全问题。 本项目基于多源监测数据，围绕边坡预警问题建立了系统的数学模型，利用python/matlab/mysql实现项目落地，建立了分级预警机制，确保了工程实践中的高效决策支持，具有较强的物理可解释性与工程适用性，可为边坡灾害精准防控提供数据支撑与决策依据

该程序是 AI 文档智能修改工具，支持 docx、xlsx、pdf、txt 格式文件处理。用户可上传文件、选择保存目录、输入修改要求，实现内容润色、纠错、格式调整等定制化修改，修改后文件自动保存至指定路径，全程可视化日志反馈处理状态。

之前想做个音乐分享平台，让大家能分享好听的音乐 主要功能： - 音乐上传：支持多种音质（标准、HQ、SQ、Hi-Res等），上传能获得贡献值 - 在线播放：底部播放器，支持播放/暂停、上一首下一首,进度条,音量控制 - 搜索功能：按歌名/歌手搜索，结果按官方认证,播放量,音质排序 - 求歌曲：用户可以发布求歌请求，别人帮忙上传能获得奖励 - 商店系统：用贡献值买虚拟物品或兑换券 - 任务广场：显示待解决的求歌任务 还有管理员后台，能管理用户,审核注册,封禁违规内容这些

平台是基层数字治理引擎，核心应用于网格化管理、矛盾纠纷线上调解、民生服务响应及应急事件协同处置四大行业场景。 该平台通过构建多级联动指挥体系，整合线上便民服务端口与线下网格力量 主要功能：网格员动态管理、事件纠纷线上上报转办、数据统计分析、矛盾纠纷调解（婚姻家庭、邻里、合同等七类）、便民服务响应（小程序）、应急协同处置，实现基层治理数字化闭环管理。