本项目旨在为亚林所内部网络开发一个数据存储和共享平台,支持批量上传和数据可视化功能。随着数据量的增加和需求的变化,系统将逐步扩展功能,并可能在未来向公众开放使用。 需求来源 亚林所目前需要一个高效的数据管理系统,以便存储和共享大量的基因数据。现有的数据管理方式无法满足日益增长的数据量和复杂的分析需求,因此需要开发一个新的系统来提升数据管理和分析的效率。
数据存储与管理:系统将采用关系型数据库(如MySQL或PostgreSQL)来存储和管理数据,确保数据的完整性和一致性。 用户权限管理:通过角色权限控制(RBAC)机制,实现不同用户角色的权限管理,确保数据的安全性和访问控制。 数据上传与共享:支持EXCEL和TXT文件的批量上传功能,方便用户快速上传和共享数据。 数据可视化:利用前端技术(如D3.js、ECharts等)实现多种数据可视化功能,包括中国地图、热图等。 查询优化:采用索引优化、缓存机制等技术手段,提高系统的查询效率,确保在数据量增加的情况下依然能够快速响应。
1.3.1.数据存储与共享
功能描述:网站需要具备数据存储功能,并提供批量上传数据的功能,支持数据共享。
详细说明:用户可以通过网站上传数据文件(如EXCEL表格、TXT文件),系统支持批量上传,方便用户一次性上传大量数据。上传的数据可以在不同用户之间共享,确保数据的可访问性和协作性。
1.3.2.用户权限管理
功能描述:系统需要设置不同的用户权限,包括超级管理员、管理员、普通用户和一般用户。
详细说明:
超级管理员:拥有最高权限,可以管理所有用户和数据,进行系统设置和维护。
管理员:可以管理普通用户和数据,但不能进行系统设置。
普通用户:只能查看、下载和上传数据,不能进行管理操作。
一般非注册用户:只能查看。
一般已注册用户:只能查看和上传数据,限制文件大小,文件有对应的格式要求。
1.3.3.网站安全与用户接口
为保证网站数据安全,目前只限制亚林所区域内的IP访问网站,暂不对外开放。
需要有中英文一键切换功能。
1.3.4.数据存储格式
功能描述:支持EXCEL表格和TXT文件的存储,用户有扩展EXCEL表格属性的需求,即数据库表列具有可扩展性。
详细说明:用户通过上传指定模板的EXCEL文件或者TXT文件,模板通过系统进行下载,系统需要对上传的文件内数据进行识别并存储,EXCEL文件每一行即为一条数据,TXT文件通过分隔符(Tab制表符)进行分隔。
1.3.5.数据类型
功能描述:数据编号需要手动录入,基因数据以字母形式存储。
详细说明:
表型调查数据(样例):EXCEL文件,每行代表一条数据,上传至系统时需要先下载模板。
基因表达量数据(样例):TXT文件,通过制表符建立的,上传系统时需要准确识别每一条数据。
1.3.6.数据库建设与功能拓展
功能描述:首先建立一个基础数据库,后续根据需求进行功能拓展。
详细说明:项目初期需要建立一个基础数据库,用于存储和管理