业务和功能介绍
通过动作姿势进行音乐演奏，创作乐曲，通过手机模拟乐器，进行音乐演奏
将手机摄像头对准身体，可使用前置摄像头和后置摄像头，对着摄像头做动作，软件通过AI智能识别身体动作，身体每个部分运动的动作通过AI转换为对应不同乐器的演奏指令，手机模拟不同乐器演奏发出的声音，开始演奏不同乐器。双击屏幕可以调出设置界面，可以进行摄像头切换，更改演奏乐器，也可以通过屏幕演奏相应乐器
身体动作驱动的音乐应用
1. 主界面与摄像头启动
用户点击应用图标进入主界面，默认开启前置摄像头（支持切换至后置摄像头）。
实时预览摄像头画面，并提示用户“将身体对准镜头开始演奏”。
2. 身体骨骼关键点识别
应用通过计算机视觉算法（如MediaPipe、OpenPose）实时检测用户身体的关键骨骼点（如手肘、手腕、肩膀、头部等）。
每个关键点的运动对应架子鼓的不同乐器（如：
左手挥动 → 踩镲（Hi-Hat）
右手挥动 → 军鼓（Snare Drum）
头部点头 → 底鼓（Bass Drum）
抬腿动作 → 吊镲（Crash Cymbal）
3. 动作驱动的音乐演奏
用户通过身体动作触发乐器声音，例如：
快速挥手 → 连续击打军鼓（连奏效果）。
大幅度跳跃 → 触发重音或特殊音效。
系统实时反馈声音，确保低延迟，增强沉浸感。
4. 设置界面（双击屏幕调出）
摄像头切换：前置/后置摄像头一键切换。
乐器配置：自定义每个身体部位对应的乐器（如将“头部点头”改为触发铜鼓）。
手动演奏模式：在设置界面中，用户可直接点击屏幕上的虚拟鼓面进行手动演奏。
5. 其他功能
灵敏度调节：适应不同用户的动作幅度（如儿童/成人）。
背景音乐：支持加载用户自定义的伴奏曲目，与动作演奏同步。
录制与分享：保存演奏片段并导出为视频或音频文件。
将手机摄像头对准身体，可使用前置摄像头和后置摄像头，对着摄像头做动作，软件通过AI智能识别身体动作，身体每个部分运动的动作通过AI转换为对应不同乐器的演奏指令，手机模拟不同乐器演奏发出的声音，开始演奏不同乐器。双击屏幕可以调出设置界面，可以进行摄像头切换，更改演奏乐器，也可以通过屏幕演奏相应乐器
身体动作驱动的音乐应用
1. 主界面与摄像头启动
用户点击应用图标进入主界面，默认开启前置摄像头（支持切换至后置摄像头）。
实时预览摄像头画面，并提示用户“将身体对准镜头开始演奏”。
2. 身体骨骼关键点识别
应用通过计算机视觉算法（如MediaPipe、OpenPose）实时检测用户身体的关键骨骼点（如手肘、手腕、肩膀、头部等）。
每个关键点的运动对应架子鼓的不同乐器（如：
左手挥动 → 踩镲（Hi-Hat）
右手挥动 → 军鼓（Snare Drum）
头部点头 → 底鼓（Bass Drum）
抬腿动作 → 吊镲（Crash Cymbal）
3. 动作驱动的音乐演奏
用户通过身体动作触发乐器声音，例如：
快速挥手 → 连续击打军鼓（连奏效果）。
大幅度跳跃 → 触发重音或特殊音效。
系统实时反馈声音，确保低延迟，增强沉浸感。
4. 设置界面（双击屏幕调出）
摄像头切换：前置/后置摄像头一键切换。
乐器配置：自定义每个身体部位对应的乐器（如将“头部点头”改为触发铜鼓）。
手动演奏模式：在设置界面中，用户可直接点击屏幕上的虚拟鼓面进行手动演奏。
5. 其他功能
灵敏度调节：适应不同用户的动作幅度（如儿童/成人）。
背景音乐：支持加载用户自定义的伴奏曲目，与动作演奏同步。
录制与分享：保存演奏片段并导出为视频或音频文件。
项目实现
技术实现
核心算法：基于MediaPipe或TensorFlow Lite的轻量级姿态估计模型，适配移动端实时计算。
声音引擎：使用低延迟音频库（如FMOD或Wwise）确保音效即时响应。
跨平台支持：可通过Kotlin（Android）和Swift（iOS）原生开发，或Flutter跨平台实现。
此设计结合了趣味性与技术深度，适合健身娱乐、音乐教育等场景。
核心算法：基于MediaPipe或TensorFlow Lite的轻量级姿态估计模型，适配移动端实时计算。
声音引擎：使用低延迟音频库（如FMOD或Wwise）确保音效即时响应。
跨平台支持：可通过Kotlin（Android）和Swift（iOS）原生开发，或Flutter跨平台实现。
此设计结合了趣味性与技术深度，适合健身娱乐、音乐教育等场景。
示例图片视频
相似推荐
人寿保险核心业务系统-LIS
1，为人寿保险公司提供核心业务开展的软件支持，满足公司业务开展要求和监管审批条件
2，涉及投保，保全，理赔，监管等模块
3，投保模块从扫描开始，对保单数据提取，人工核对录入后，通过工作流审核，将保单存放系统并形成正式合同。监管模块通过配置规则，将业务订单和财务数据按监管要求进行提取，生成文件上报，对回执内容解析和生成后续工作流。
阿里某BU-对账结算系统
阿里某BU对账结算系统是面向交通出行场景的全链路财务结算平台，全面支撑机票、火车票、船票、租车等多条业务线的资金对账与结算工作，覆盖交易对账、账单核销、成本核算、利润结转、差错处理全流程核心能力，是BU出行交易资金闭环、账务合规、收益核算的核心底层系统。平台承接全品类出行订单的日均大规模账务计算任务，保障海量交易数据下账务精准、结算合规、异常可追溯。
系统采用主流Spring Boot微服务架构搭建后端服务，底层基于PolarDB分布式数据库完成亿级交易数据的稳定存储，依托MaxCompute Spark构建弹性算力引擎，搭建批流一体OLAP计算体系，支撑日均百万级的对账、结转计算任务，可弹性应对大促、峰值订单流量带来的账务计算压力，保障全业务线财务结算高效、稳定、准确落地。
Go+FFmpeg 抖音财经股票指标视频自动化生成系统
一、项目简介
本人自1993年接触证券市场，2004年尝试用PHP开发自动化指标筛选程序，因并发性能限制，批量数据运算耗时过长。2015年转向Go语言，依托原生并发模型，将运算耗时由半小时优化至1分钟内，期间对比Python、Julia等语言后，最终选定Go为主力开发语言。
2025年启动本项目：基于自研股票指标函数体系，搭建财经短视频自动化流水线，将量化指标可视化内容批量生成视频并适配抖音平台分发标准。
技术迭代上，初期采用fogleman/gg生成PNG图片序列，再由FFmpeg合成视频。经持续优化，现绝大部分素材渲染直接交由FFmpeg完成，仅在FFmpeg耗时过高、分辨率无法满足需求时，回退使用GG生成静态图片。整套系统已实现数据解析、图表渲染、视频合成一站式自动化。
二、业务功能
批量指标运算：批量读取量化数据，自动运算生成股票指标信号。
数据可视化渲染：支持FFmpeg滤镜实时绘图，兼容GG静态PNG绘图兜底方案。
短视频自动合成：按平台规范自动合成视频，适配抖音等主流短视频平台分辨率与码率要求。
全流程自动化调度：从数据到视频全链路自动化，支持持续产出可视化素材。
智能渲染链路切换：根据耗时、画质需求，自动选择最优渲染方案（FFmpeg主链路/GG兜底）。
三、技术栈
Go、FFmpeg、fogleman/gg、股票量化接口、自动化调度脚本
量化工作平台
1、项目是面向股票、ETF、指数和期货的本地量化数据与策略研究平台，覆盖数据维护、因子研究、策略回测及研究成果管理等环节。
2、支持从 Tushare 和期货 Tick 文件获取数据，完成增量更新、复权处理、标准化存储、失败重试以及数据完整性和质量检查。
3、内置 Basic、Alpha158、Alpha101 等因子体系，支持因子计算、覆盖率检查、IC/RankIC 分析、分组收益分析、稳定性评估和因子选股。
4、提供股票池筛选、组合回测、调仓、交易成本、涨跌停及 ST 等交易约束，并输出净值、交易、持仓、诊断和基准对比结果。
5、支持策略回测、跟踪。
6、提供本地可视化工作台，可查看数据状态、因子、策略、组合和研究产物，并通过 Watchlist 和生命周期机制管理候选策略及复盘记录。
报表中台
本模块提供多维度报表数据展示及多格式导出功能，支持将业务数据一键导出为 Excel、CSV 及 PDF 格式。系统内置高性能生成引擎，保障大数据量导出时的稳定与高效，满足用户离线分析、数据归档及财务对账等多样化业务需求。
帮助文档
Copyright @ 2021-2024 程聚宝 | 浙ICP备2021014372号
人工客服