业务和功能介绍
1、立项背景和目标：
在工作和学习中，我们经常需要处理大量的PDF、Word、TXT等格式的文档（如行业报告、产品手册、研究论文）。传统方式下，在这些文档中查找特定信息效率低下，且难以进行深度的知识整合。本项目旨在开发一个智能个人知识库系统，允许用户上传自己的文档库，并能够通过自然语言进行提问，系统能快速、准确地从文档中定位并生成答案，从而极大提升信息检索和知识消化的效率。
2、软件功能、核心功能模块的介绍：
文档管理模块：支持多格式文档（PDF， DOCX， TXT）的上传、列表展示与删除。
向量化存储模块：自动将上传的文档进行文本分割，并调用嵌入模型将其转换为向量，存储至Chroma向量数据库中。
智能问答模块：提供对话界面，用户输入问题后，系统首先从向量库中检索最相关的文档片段，然后将这些片段与用户问题一同提交给大型语言模型（如GPT-3.5-turbo），生成一个精准、有上下文依据的答案。
3、业务流程、功能路径描述：
用户首先进入Web应用主界面 -> 在“文档上传”区上传一个或多个文档 -> 系统后台处理文档，并在界面上显示“处理成功” -> 用户切换到“知识问答”标签页 -> 在输入框中用自然语言提出问题，例如“总结一下文档中关于市场趋势的要点” -> 系统在1-3秒内返回一个结构清晰、引用了源文档内容的答案。
在工作和学习中，我们经常需要处理大量的PDF、Word、TXT等格式的文档（如行业报告、产品手册、研究论文）。传统方式下，在这些文档中查找特定信息效率低下，且难以进行深度的知识整合。本项目旨在开发一个智能个人知识库系统，允许用户上传自己的文档库，并能够通过自然语言进行提问，系统能快速、准确地从文档中定位并生成答案，从而极大提升信息检索和知识消化的效率。
2、软件功能、核心功能模块的介绍：
文档管理模块：支持多格式文档（PDF， DOCX， TXT）的上传、列表展示与删除。
向量化存储模块：自动将上传的文档进行文本分割，并调用嵌入模型将其转换为向量，存储至Chroma向量数据库中。
智能问答模块：提供对话界面，用户输入问题后，系统首先从向量库中检索最相关的文档片段，然后将这些片段与用户问题一同提交给大型语言模型（如GPT-3.5-turbo），生成一个精准、有上下文依据的答案。
3、业务流程、功能路径描述：
用户首先进入Web应用主界面 -> 在“文档上传”区上传一个或多个文档 -> 系统后台处理文档，并在界面上显示“处理成功” -> 用户切换到“知识问答”标签页 -> 在输入框中用自然语言提出问题，例如“总结一下文档中关于市场趋势的要点” -> 系统在1-3秒内返回一个结构清晰、引用了源文档内容的答案。
项目实现
1、整体架构和设计思路，不同模块使用的技术栈。
项目采用前后端一体的轻量级架构，使用Streamlit快速构建Web界面。后端逻辑完全由Python驱动。
前端/交互层：Streamlit。负责渲染文件上传组件、聊天界面和结果显示。
业务逻辑层：LangChain框架。它像“胶水”一样串联了整个流程，包括文档加载器、文本分割器、向量检索链和与大模型的对话链。
数据层：Chroma（向量数据库）。用于存储和高效检索文档的向量化表示。嵌入模型使用了OpenAI的text-embedding-3-small，大模型使用了OpenAI的gpt-3.5-turbo。
2、“我”的负责模块和结果（尽可能量化）。
我是该项目的全栈开发者，负责从零到一的所有工作。
结果量化：
实现了对3种常见文档格式的解析支持。
在包含50页技术文档的测试集中，问答响应时间平均在2秒以内。
通过设计高质量的检索提示词，使得答案的准确率（与文档内容匹配且直接回答问题的比例）从初版的约60%提升至85%以上。
成功部署至云端，并供小范围团队成员试用，收集了第一批反馈。
3、“我”遇到的难点、坑，和解决方案。
难点一：长文档处理与上下文丢失。初期直接将整个文档扔给LLM，导致模型因上下文长度限制而无法处理，且答案质量差。
解决方案：引入RAG架构。先将长文档切分成小块（Chunks），只将与问题最相关的几个块检索出来作为上下文，完美解决了上下文长度和答案相关性的问题。
难点二：检索精度不高。有时检索出的文本片段与问题关联性不强，导致生成的答案不准确。
解决方案：优化了文本分割策略，尝试了不同的大小和重叠度，最终确定了最佳参数。同时，在构建检索链时，使用了ContextualCompressionRetriever，对检索结果进行重排序和过滤，显著提升了Top-K结果的精度。
难点三：Streamlit应用的状态管理。在聊天场景下，需要记录对话历史，而Streamlit默认每次交互都会重跑脚本。
解决方案：利用Strea
项目采用前后端一体的轻量级架构，使用Streamlit快速构建Web界面。后端逻辑完全由Python驱动。
前端/交互层：Streamlit。负责渲染文件上传组件、聊天界面和结果显示。
业务逻辑层：LangChain框架。它像“胶水”一样串联了整个流程，包括文档加载器、文本分割器、向量检索链和与大模型的对话链。
数据层：Chroma（向量数据库）。用于存储和高效检索文档的向量化表示。嵌入模型使用了OpenAI的text-embedding-3-small，大模型使用了OpenAI的gpt-3.5-turbo。
2、“我”的负责模块和结果（尽可能量化）。
我是该项目的全栈开发者，负责从零到一的所有工作。
结果量化：
实现了对3种常见文档格式的解析支持。
在包含50页技术文档的测试集中，问答响应时间平均在2秒以内。
通过设计高质量的检索提示词，使得答案的准确率（与文档内容匹配且直接回答问题的比例）从初版的约60%提升至85%以上。
成功部署至云端，并供小范围团队成员试用，收集了第一批反馈。
3、“我”遇到的难点、坑，和解决方案。
难点一：长文档处理与上下文丢失。初期直接将整个文档扔给LLM，导致模型因上下文长度限制而无法处理，且答案质量差。
解决方案：引入RAG架构。先将长文档切分成小块（Chunks），只将与问题最相关的几个块检索出来作为上下文，完美解决了上下文长度和答案相关性的问题。
难点二：检索精度不高。有时检索出的文本片段与问题关联性不强，导致生成的答案不准确。
解决方案：优化了文本分割策略，尝试了不同的大小和重叠度，最终确定了最佳参数。同时，在构建检索链时，使用了ContextualCompressionRetriever，对检索结果进行重排序和过滤，显著提升了Top-K结果的精度。
难点三：Streamlit应用的状态管理。在聊天场景下，需要记录对话历史，而Streamlit默认每次交互都会重跑脚本。
解决方案：利用Strea
示例图片视频
相似推荐
基于深度强化学习(DRL)的加密货币高频量化交易系统
本项目旨在解决传统量化策略在极端行情下适应性差的问题，开发了一套基于深度强化学习的自动化交易系统。
主要功能包括：
多因子数据处理：实时接入交易所WebSocket数据，自动清洗并计算MACD、RSI、布林带等50+技术指标及链上数据特征。
智能决策代理：系统根据当前市场状态（State），自动输出买入、卖出或持仓动作（Action），并动态调整仓位比例。
回测与模拟盘：提供高性能回测引擎，支持历史数据回放验证策略有效性，并集成实盘模拟环境。
风险控制模块：内置最大回撤控制、止盈止损机制，防止极端市场波动导致的本金大幅亏损。
酒企数字化平台整合与升级项目
基于对白酒行业的深刻理解和金蝶云平台的技术积累，制定“平台统一、数据驱动、内外协同”的数字化升级战略。
1. 核心平台选型与部署：
平台选择： 采用金蝶云EAS作为集团统一的ERP运营平台。
模块覆盖： 全面实施了财务、供应链（采购、销售、库存）、生产制造（物料清单、生产计划）等核心模块，实现了业务流程的标准化和统一化管理。
2. 个性化定制开发与集成：
第三方WMS/MES深度对接： 实现了EAS与业内领先的WMS（仓储管理系统）和MES（生产管理系统）的无缝对接。
流程优化： 销售订单在金蝶系统生成后，自动下发至WMS进行拣货、出库；出库数据实时回传至金蝶。实现了从订单到发货的全流程可视化。
价值： 发货准确率提升至99.9%以上，订单交付周期缩短了40%。
Saas多门店商城-众选商城
1、随着线下门店数字化转型的加速，多门店连锁企业面临着统一管理、线上线下融合、会员服务一体化等挑战。众选商城项目旨在构建一个支持多门店独立运营又统一管理的SaaS化商城系统，帮助连锁品牌实现线上商城、门店管理、会员营销、订单配送等业务的数字化升级，提升运营效率和用户体验。
智慧零售银行平台
1、立项背景与目标
背景：客户需求个性化、同业竞争加剧、技术驱动转型。传统银行服务模式滞后，亟待数字化升级。
目标：提升客户体验，实现精准服务；提高运营效率，支持敏捷响应；强化风险控制能力。
2、核心软件功能
客户画像：整合静态属性与动态行为，全面了解客户。
精准营销：基于标签圈选客群，实现个性化产品推荐与触达。
全渠道服务：打通APP、微信、短信等渠道，提供一致服务体验。
产品工厂：支持信贷、理财等产品的快速配置与上线。
3、核心功能模块
客户洞察中心：构建360°视图，支撑精准营销。
营销自动化引擎：实现跨渠道、事件触发的自动化营销流程。
全渠道管理中台：统一管理各触点，确保服务协同。
智能风控系统：实时识别与处置交易及信贷风险。
典型业务流程
理财营销流程：
系统识别意向客户。
自动推送匹配产品。
未响应客户转入二次触达。
理财经理对高意向客户进行跟进。
功能路径描述
客户申请贷款：
客户在线提交申请。
系统自动预审并调用风控模型。
审批通过后，线上签约放款。
全程无纸化，体验高效流畅。
农信银银行APP-广西农信
1、基础金融管理
账户明细查询：可实时查看账户余额、历史收支明细，还专门标注惠农补贴专用账目栏，方便农户核对补贴到账情况；交易记录支持多维度筛选，也能查看股金相关信息。
转账汇款：支持行内转账、跨行快汇，不仅操作简便且能实时到账。
资金灵活调度：提供定活互转功能，用户可根据自身资金使用规划，在线上自由切换定期存款和活期存款，无需前往网点办理。
2、贷款与理财服务
贷款相关操作：有农信易贷等贷款服务，涵盖企税贷、闪贷等多种产品，农户还能凭种植合同在线申请最高 30 万元的特色农产品信用贷款；同时支持贷款在线申请、进度查询、还款明细查询等全流程操作，部分贷款可实现 “1 分钟签约、1 分钟提款、1 分钟还款”。
理财产品选购：平台会对上线的理财产品严格审核后推荐给用户，包含活期、定期、周周乐等多种类型，满足不同用户的风险偏好和收益需求，助力用户实现财富保值增值。
3、生活便民服务
综合生活缴费：可一站式缴纳移动、联通、电信等全国手机话费，以及电费、广电有线电视费等，覆盖 18 类民生缴费项目；还支持设置账单提醒和自动扣费，避免因遗忘缴费带来不便。
特色生活功能：部分版本中包含电影票购买等娱乐相关功能，无需切换其他软件就能完成操作；同时支持公益捐款功能，方便用户随手参与公益项目。
4、附加保障与服务
账户安全防护：采用多重加密技术，搭配指纹、人脸识别等生物认证方式；账户绑定新设备时会触发安全检测，若监测到异常交易还会及时预警，保障资金安全。
业务签约与客服：用户可在线办理短信银行、银联在线支付等业务的签约与解约；还有 7×24 小时在线客服，随时为用户解答使用过程中遇到的问题。
帮助文档
Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服