业务和功能介绍
1. 此项目旨在为日本旅客提供智能化、个性化的签证申请辅助服务。传统签证申请流程复杂、信息分散，尤其对非英语母语者存在语言与流程障碍。项目目标是通过AI聊天机器人，为用户提供一站式的签证信息查询、材料清单生成与文件上传服务，显著提升申请效率与用户体验，同时确保数据安全与多语言支持。
2. 系统核心为基于Microsoft Bot Framework SDK开发的AI聊天机器人，具备以下功能模块：
a. 智能对话引擎：集成Azure OpenAI，支持自然日语交流，理解用户出行意图与个人情况。
b. 个性化签证清单生成：根据用户输入的目的地与个人资料，动态生成所需材料清单。
c. 自适应交互界面：使用Adaptive Cards引导用户逐步填写信息、上传文件。
d. 安全文件管理：通过Azure Blob Storage实现护照、签证相关文件的安全上传与存储。
e. 规则引擎与条件流程：后端逻辑支持不同国家的签证规则匹配与动态对话跳转。
f. 前端集成：通过Bot Framework Web Chat嵌入React前端，提供流畅的对话界面。
3. 用户启动聊天机器人后，系统首先进行身份与出行意图识别，随后引导用户选择目的地、出行类型等关键信息。基于输入，系统调用规则引擎生成个性化材料清单，并通过Adaptive Cards引导用户逐一确认与上传文件。
2. 系统核心为基于Microsoft Bot Framework SDK开发的AI聊天机器人，具备以下功能模块：
a. 智能对话引擎：集成Azure OpenAI，支持自然日语交流，理解用户出行意图与个人情况。
b. 个性化签证清单生成：根据用户输入的目的地与个人资料，动态生成所需材料清单。
c. 自适应交互界面：使用Adaptive Cards引导用户逐步填写信息、上传文件。
d. 安全文件管理：通过Azure Blob Storage实现护照、签证相关文件的安全上传与存储。
e. 规则引擎与条件流程：后端逻辑支持不同国家的签证规则匹配与动态对话跳转。
f. 前端集成：通过Bot Framework Web Chat嵌入React前端，提供流畅的对话界面。
3. 用户启动聊天机器人后，系统首先进行身份与出行意图识别，随后引导用户选择目的地、出行类型等关键信息。基于输入，系统调用规则引擎生成个性化材料清单，并通过Adaptive Cards引导用户逐一确认与上传文件。
项目实现
在实习期间，我主要负责以下模块的实现与优化：
1. 设计并实现7个核心对话流，覆盖从用户问候到材料上传全流程。
2. 集成Azure OpenAI服务，使机器人能自然理解与回复日语查询，测试准确率超过92%。
3. 实现了聊天机器人与聊天界面之间的多语言切换功能。
4. 参与了从确认客户需求、后续跟进到版本控制的完整流程。
我遇到的主要难点有：
1. 日语在自然语言处理中敬语的使用和不同语境下助词的偏差。
解决：选择以日语为基础的GPT模型，利用Azure OpenAI反复进行微调，加入大量日语对话样本进行训练等。
1. 设计并实现7个核心对话流，覆盖从用户问候到材料上传全流程。
2. 集成Azure OpenAI服务，使机器人能自然理解与回复日语查询，测试准确率超过92%。
3. 实现了聊天机器人与聊天界面之间的多语言切换功能。
4. 参与了从确认客户需求、后续跟进到版本控制的完整流程。
我遇到的主要难点有：
1. 日语在自然语言处理中敬语的使用和不同语境下助词的偏差。
解决：选择以日语为基础的GPT模型，利用Azure OpenAI反复进行微调，加入大量日语对话样本进行训练等。
示例图片视频
相似推荐
国际跨域 SD-WAN 网络服务平台-国际跨域 SD-WAN 运营平台
平台面向全球企业用户提供国际跨域 SD-WAN 网络服务，提供从业务订购、资源管理到实时监控、计费结算的一站式服务。
主要功能模块包括：
后台管理平台：
基础数据管理： 支持洲、国家、城市、社区等地理层级配置，适配全球多节点网络资源管理。
产品套餐管理： 套餐创建、资费规则、优惠策略配置，支持月包/季包/年包等灵活计费模式。
资源与认证管理： IP 资源、账号认证信息、网络资源分配，保障业务开通与安全接入。
计费与报表： 订单计费、账单生成、统计报表、业务流水查询。
监控与运维： 在线状态、流量监控、告警管理、系统日志。
组织与权限： 多层级组织机构、角色权限、工号管理，适配运营商及代理商体系。
用户自助平台：
在线订购： 用户自助浏览产品套餐并在线订购；
在线缴费： 支持套餐续费、叠加包购买、账户余额管理；
实时查看： 展示认证信息、IP 地址、流量监控、到期时间等关键数据；
历史订单与账单： 查询历史订单、查看账单明细。
平台支持多国家、多节点、多货币计费，具备良好的国际化扩展能力。
主要功能路径：运营方配置基础数据与套餐 → 用户在线订购 → 系统分配资源与认证 → 用户在线缴费 → 实时监控业务状态 → 生成账单与报表。
充电桩合伙人推广小程序及微信服务号- 电桩合伙人
电桩合伙人是从 0 到 1 搭建的微信生态推广平台，主要服务于充电桩运营商拓展线下安装渠道。
核心功能模块包括：
合伙人招募与管理： 用户在线申请成为合伙人，平台审核通过后分配唯一推广二维码与邀请链接，支持合伙人层级关系绑定。
合伙人裂变： 通过邀请码机制实现二级裂变，新合伙人注册自动关联邀请人，形成可持续扩展的推广网络。
充电桩推广： 合伙人通过微信分享充电桩产品及安装服务，潜在客户扫码进入下单流程，系统记录推广来源。
订单全生命周期管理： 覆盖进件上传、公司审批、政府审核、施工安排、验收确认、售后结算等完整流程。
佣金结算与提现： 系统按分润规则自动计算订单佣金，支持余额明细查询、提现申请与审批。
消息触达： 服务号负责订单状态通知、审核提醒、收益到账提醒等用户运营触达。
主要功能路径：合伙人注册 → 推广获客 → 客户下单 → 多角色审核 → 施工交付 → 佣金结算 → 提现到账。
滴滴出行-滴滴车主服务端
作为滴滴出行核心车主后端底座系统，承载全平台司机入驻、运力管理、订单承接、状态同步、收益结算、风控管控等核心业务，覆盖快车、专车、顺风车等全品类出行场景，支撑百万日活司机在线接单、千万级日均订单流转。核心能力包含司机运力调度、核心订单链路处理、用户权限管控、高可用流量承载、全链路风控、运维监控治理，通过架构升级解决传统PHP架构耦合严重、迭代慢、性能差的问题，提升系统并发能力与业务迭代效率。
地图项目
1.大厂地图项目，服务海外客户使用
2.功能包括：启动页，map点列表，沿途搜，途径点，导航，打车服务
3.用户使用行为上传和代码行为触发埋点
4.用户根据当前定位获取位置信息，周边酒店，景点等信息，可以使用导航功能
驾驶员行为监控系统
驾驶员行为监控（物流公司等对驾驶员的危险驾驶监控）
开发语言 c++
硬件 选用了地平线旭日 3 环境linux
视觉算法 yolo5
功能包括：
1）从摄像头模块采集视帧
用地平线芯片硬件API直接采集
2）缩放视频。
地平线芯片硬件API直接缩放
3）将视频编码成 h264
实际使用时，在地平线开发板上接了两路 usb 摄像头和一个 MIPI 摄像头。用地平线的硬件编码 API，同时对三路码流进行编码.
4）原始音频采集
使用 alsa 库采集的声音。
5) 声音的编码
把原始的声音编码成 mp3
6) 视频和声音的混合
把 h264 和 mp3 混合成 mp4 文件。
7）文件的滚动存储
地平线开发板接硬盘，音视频编码成的 mp4 文件, 5 分钟一个 mp4 文件，超过一个月的文件自动删除。
8）码流传输模块：动态码流传输当某些情况触发时，编码端向服务器即时发送 h264 码流，以及 mp3 声音流。网络是 5G 网络。发送追求最小的延时，其中分辨率、帧率、码流、gopsize 可以根据网络状况等，进行动态的调整。比如编码端感觉网络有点拥堵，就通知接收端要降低分辨率和码流，发送新的分辨率、帧率、码流等参数给解码端，等解码端完成参数的更新调整，编码端发送新的参数的视频流到解码端。
接收端可以马上播放收到的视频流和声音。
9) 驾驶员手离开方向盘监控
这是危险驾驶监控的一项。驾驶员手离开方向盘时，会马上提示他，并截图发送给服务端，同时作出记录。
训练模型，识别手没在方向盘上，转化为地平线格式
10）打电话识别监控
训练模型识别打电话动作，转化为地平线格式
11）驾驶员疲劳状态监控
训练模型识别人员疲劳表情，转化为地平线格式
帮助文档
Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服