乐于分享
好东西不私藏

DA/T 82—2019《基于文档型非关系型数据库的档案数据存储规范》标准解读——从关系型到型的范式迁移

DA/T 82—2019《基于文档型非关系型数据库的档案数据存储规范》标准解读——从关系型到型的范式迁移

一数一库护档案,文档存储有章循

随着数字档案馆(室)建设的推进和“互联网+政务服务”的深入发展,档案馆面临的档案数据类型日趋复杂——既有结构化数据,也有大量非结构化的电子文件、数字化副本和业务数据。长期以来,档案部门普遍采用关系型数据库存储和管理档案数据,但面对数据结构复杂、类型多样的非结构化数据,关系型数据库的局限性日益显现。

2019年12月16日,国家档案局正式发布DA/T 82—2019《基于文档型非关系型数据库的档案数据存储规范》 ,于2020年5月1日正式实施。该标准由国家档案局档案科学技术研究所提出并起草。这是国内首个针对文档型非关系型数据库存储档案数据的行业标准,填补了该领域的标准空白。本文将对标准的核心内容进行系统解读,为各级各类档案馆、机关、团体、企事业单位的档案管理人员及信息化建设人员提供一份实用的操作指南。

一、标准基本信息

项目
内容
标准号
DA/T 82—2019
中文名称
基于文档型非关系型数据库的档案数据存储规范
英文名称
Specification for storage of archival data based on document-oriented non-relational database
发布日期
2019年12月16日
实施日期
2020年5月1日
标准状态
现行
中国标准分类号
A 14
国际标准分类号
01.140.20
归口单位
国家档案局
主管部门
国家档案局
标准类别
推荐性行业标准
起草单位
国家档案局档案科学技术研究所
主要起草人
聂曼影、陶光毅、张淑霞、晏杰、王嘉、刘春阳、陈吉

标准结构:《规范》分10章正文和2个资料性附录(附录A 检索、附录B 统计分析),涵盖了使用文档型数据库存储档案数据所涉及的各个工作环节,构成一个内在关联的整体。

二、出台背景:为何需要这份标准?

(一)关系型数据库的局限日益凸显

目前,我国档案部门大都采用关系型数据库存储和管理档案数据。关系型数据库通常将数据存储在二维表中,高度结构化,对数据的规范性要求高,能够很好地管理和存储结构化数据。然而,档案数字资源中非结构化数据占据绝大部分,且未来还将出现爆炸性增长。关系型数据库对数据结构复杂、类型多样的非结构化数据的存储和管理存在诸多局限。

(二)业务对接的现实需求日益迫切

2018年,国务院发布《国务院关于加快推进全国一体化在线政务服务平台建设的指导意见》,“互联网+政务服务”“一网通办”在全国深入推进。档案馆面临最直接的问题就是:如何高效、快速、敏捷地对接各种业务系统,并且完整地收集、归档、保存各类业务数据

非关系型数据库突破了关系型数据库严格的表结构,解决了关系型数据库模型简单、不易表达复杂嵌套数据结构的问题,存储的数据对象包括非结构化数据、半结构化数据和结构化数据。视处理数据对象而言,目前非关系型数据库主要有键值存储、列存储、文档型和图形四大类。

(三)标准制定的历程

历时3年,国家档案局档案科学技术研究所于2016年完成了“基于非关系数据库的电子档案存储规范研究及系统实现”国家档案局科技项目。在该项研究成果的基础上,向全国档案工作标准化技术委员会提交了《规范》的立项申请,旨在解决大规模档案数据集合多重数据种类带来的挑战,优化档案数据存储,推动档案数据科学管理。《规范》被列入2017年档案行业标准制修订项目计划

(四)编制思路

《规范》主要以问题与需求为导向,充分考虑档案数据体量大且增长快、类型繁多且结构复杂的特点,切实从我国档案数据管理实际需要出发,详细阐述文档型非关系型数据库存储和管理档案数据的技术要求、基本功能和实施方法。注重适用性、规范性、开放性、互补性,着重先进性与可操作相结合,使其利于实施。

口诀:关系型有局限,非结构数据难;政务服务催需求,三年研究终成标;二〇一九十二月发布,二〇二〇五月实施。

三、适用范围

根据标准规定,本文件规定了使用文档型数据库存储档案数据的总体要求,提出了使用文档型数据库存储和管理档案数据的基本功能和实施方法

本文件适用于各级各类档案馆以及机关、团体、企事业单位对档案数据的存储

四、核心术语:四个国内外首次提出的定义

标准规定了4个核心术语和定义,均属于国内外首次提出

术语
核心内涵
内容数据
电子档案和传统载体档案数字化副本的固有信息
非关系型数据库
突破了关系型数据库严格的表结构,存储非结构化、半结构化和结构化数据的数据库类型
文档型数据库的拆分
将文档型数据库拆分成若干个小容量数据库的操作
文档型数据库的合并
将多个文档型数据库合并为一个数据库的操作

核心概念辨析

在文档型数据库中,文档是处理信息的基本单位。文档型数据库允许创建不同类型的字段,存储任意格式的数据,并且每一个被存储的对象可与任一其他对象不同。采用文档型数据库,能够简单地将不同类型、不同格式的档案数据装入数据库或映射到数据库。

口诀:四个术语首次提,内容数据非关系;拆分合并文档库,文档是基本单位。

五、总体要求:四项原则

标准第3章明确了使用文档型数据库存储档案数据的四项总体要求

原则
核心内涵
适用性
文档型数据库适用于档案数据存储的实际场景
规范性
存储和管理档案数据应符合规范要求
开放性
支持不同系统、不同格式数据的接入
互补性
文档型数据库与关系型数据库可共同作为档案数据存储和管理的工具

六、文档型数据库字段(第4章)

标准第4章规定了文档型数据库的字段要求字段类型

(一)字段要求

文档型数据库的字段设置应适应不同的内容数据格式以及元数据需要。

(二)字段类型

文档型数据库字段类型包括:

字段类型
用途
字符串
存储文本字符串
数值
存储数字数据
日期
存储日期信息
时间
存储时间信息
文本
存储文本中的句子和段落,包括从电子文件中抽取的文字信息(或称文本数据)
二进制
存储任何类型的字符,包括ASCII字符以及图像、视频、音频等二进制数据

文档型数据库允许创建不同类型的字段,存储任意格式的数据。

口诀:字段类型六种全,字符串数值日期时间;文本存段落与句子,二进制存图像音视频。

七、文档型数据库存储(第5章)

标准第5章从存储对象、存储方式、存储介质、存储信息管理、存储安全五个方面规定了文档型数据库存储的要求。

(一)存储对象

文档型数据库的存储对象是内容数据和元数据(含目录数据) 。内容数据是电子档案和传统载体档案数字化副本的固有信息

(二)存储方式

标准提出了文档型数据库存储内容数据的一种核心方式——将内容数据和元数据全部装入数据库

这一方式的显著特点

特点
说明
内容数据存储位置
按照与元数据的匹配关联关系,内容数据存储在二进制字段中,不是挂接在数据库上
多格式混存
多种格式的内容数据可装入同一数据库,不同记录(行)的内容数据的格式可不同
多内容共存
同一条记录可存储一个或多个内容数据,同一条记录(行)中多个内容数据的格式可不同

这些是文档型数据库存储内容数据的显著特点,也是《规范》制定的重点之一。

关系型数据库与文档型数据库的互补关系:鉴于关系型数据库和文档型数据库各自的特点和优势,档案部门可以将文档型数据库、关系型数据库共同作为档案数据存储和管理的工具

口诀:存储对象两内容,元数据加内容数据;全部装入数据库,不是挂接是存储;多格式可混存,多内容可共存。

八、档案数据导入(第6章)

标准第6章规定了档案数据导入的导入对象、导入方法、导入质量控制、导入维护

(一)导入对象(6.1)

导入的对象包括各类档案数据,如电子档案、传统载体档案数字化副本等。

(二)导入方法(6.2)

应采用规范的方法将档案数据导入文档型数据库。

(三)档案数据导入质量控制(6.3)

导入过程中应对数据质量进行控制,确保导入数据的准确性和完整性。

(四)档案数据导入的维护(6.4)

导入完成后,应对导入的数据进行维护和管理。

九、文档型数据库的拆分与合并(第7章)

标准第7章规定了文档型数据库的拆分与合并操作。

(一)文档型数据库的拆分(7.1)

当内容数据全部载入数据库,数据库会迅速变大。当数据库容量超过备份介质容量时,就难于对数据库整体进行备份,需要将数据库拆分成若干个小容量的数据库。

(二)文档型数据库的合并(7.2)

在特定条件下,可将多个文档型数据库合并为一个数据库。

十、档案数据导出(第8章)

标准第8章规定了档案数据导出的导出对象、导出形式、导出质量控制

(一)导出对象(8.1)

导出的对象是存储在文档型数据库中的档案数据。

(二)导出形式(8.2)

档案数据可以按照规定的形式从文档型数据库中导出。

(三)档案数据导出质量控制(8.3)

导出过程中应对数据质量进行控制,并设置记录档案数据导出文档型数据库过程的日志,确保能够跟踪、审计、检索(参见附录A)、统计分析(参见附录B)。

十一、文档型数据库的备份、还原与恢复(第9章)

标准第9章规定了文档型数据库的备份、还原与恢复

(一)文档型数据库的备份(9.1)

应对文档型数据库进行定期备份,防止数据丢失。

(二)文档型数据库的还原(9.2)

在需要时,可将备份的数据还原到数据库中。

(三)文档型数据库的恢复(9.3)

在数据丢失或损坏时,可通过备份数据进行恢复。

十二、文档型数据库管理与数据管理(第10章)

标准第10章规定了数据库管理、数据管理、用户管理、日志管理

(一)数据库管理(10.1)

应对文档型数据库进行规范管理,确保数据库的正常运行。

(二)数据管理(10.2)

应对存储在数据库中的档案数据进行规范管理,确保数据的完整性和安全性。

(三)用户管理(10.3)

应对访问文档型数据库的用户进行管理,控制访问权限。

(四)日志管理(10.4)

应记录数据库操作的日志,确保能够跟踪和审计。

十三、附录:检索与统计分析

标准提供了2个资料性附录

附录
内容
附录A
检索——规定了文档型数据库中档案数据的检索方法
附录B
统计分析——规定了文档型数据库中档案数据的统计分析方法

十四、标准的实践意义

(一)填补了文档型数据库存储档案数据的标准空白

DA/T 82—2019是首个专门针对文档型非关系型数据库存储档案数据的行业标准。此前,档案部门在选择和使用文档型数据库存储档案数据时缺乏统一的规范依据。标准的发布实施,使文档型数据库在档案数据存储中的应用有章可循、有据可依

(二)为大规模非结构化档案数据存储提供了技术方案

档案数字资源中非结构化数据占据绝大部分,未来还将出现爆炸性增长。文档型数据库允许创建不同类型的字段,存储任意格式的数据,能够简单地将不同类型、不同格式的档案数据装入数据库或映射到数据库。标准为大规模非结构化档案数据的存储和管理提供了科学的技术方案。

(三)构建了文档型数据库与关系型数据库的互补体系

标准明确指出,鉴于关系型数据库和文档型数据库各自的特点和优势,档案部门可以将文档型数据库、关系型数据库共同作为档案数据存储和管理的工具。这为档案部门根据数据类型和需求灵活选择存储方案提供了依据——结构化数据用关系型数据库,非结构化数据用文档型数据库,两者互补共存。

(四)规范了文档型数据库应用的全流程管理

标准从字段设置、数据存储、数据导入、拆分合并、数据导出、备份恢复、系统管理等方面,系统规范了文档型数据库在档案数据存储中应用的全流程管理,为档案部门提供了完整的操作指南。

(五)推动了档案数据管理的科学化与现代化

随着“互联网+政务服务”“一网通办”的深入推进,档案馆需要高效、快速、敏捷地对接各种业务系统。标准的实施,将推动档案部门采用更加灵活、高效的文档型数据库技术,提升档案数据存储和管理的科学化、现代化水平。

十五、完整口诀

文档存储新标准,二四八二号令颁关系型有局限,非结构数据难政务服务催需求,三年研究终成标二〇一九十二月发布,二〇二〇五月实施四个术语首次提,内容数据非关系拆分合并文档库,文档是基本单位四项原则记心间,适用规范开放互补全字段类型六种全,字符串数值日期时间文本存段落与句子,二进制存图像音视频存储对象两内容,元数据加内容数据全部装入数据库,不是挂接是存储多格式可混存,多内容可共存导入导出有规范,拆分合并按需行备份恢复保安全,日志审计可追溯关系文档互补用,档案存储有章循

当需要存储和管理大规模非结构化档案数据时,我们能依据标准、科学选型;当需要建设文档型数据库存储系统时,我们能参照规范、全面实施;当需要确保档案数据安全时,我们能规范管理、全程可控——这就是DA/T 82—2019《基于文档型非关系型数据库的档案数据存储规范》的价值与意义。

参考文献

  1. 国家档案局.DA/T 82—2019 基于文档型非关系型数据库的档案数据存储规范[S].2019-12-16[2026-08-06]. https://std.samr.gov.cn/hb/search/stdHBDetailed?id=9B83456AF29807BCE05397BE0A0AA9C2
  2. 聂曼影.《基于文档型非关系型数据库的档案数据存储规范》解读[J].中国档案,2021-01-16[2026-08-06]. http://chinaarchives.cn/home/category/detail/id/32929.html
  3. 威海市档案馆.《基于文档型非关系型数据库的档案数据存储规范》解读[EB/OL].(2021-08-18)[2026-08-06]. https://dag.weihai.gov.cn/art/2021/8/18/art_75647_2641207.html
  4. 海口市档案馆.[行业标准] DA/T 82—2019 基于文档型非关系型数据库的档案数据存储规范[EB/OL].(2020-07-24)[2026-08-06]. http://daj.haikou.gov.cn/hksdag/bmwj/202007/022b09c04b4646f0951fcebc6d12aadb.shtml
  5. 全国标准信息公共服务平台.行业标准《基于文档型非关系型数据库的档案数据存储规范》[EB/OL].[2026-08-06]. https://std.samr.gov.cn

原创声明

本文系原创作品,严格依据《基于文档型非关系型数据库的档案数据存储规范》(DA/T 82—2019)行业标准及官方解读材料编写。内容严谨、数据可考,旨在为各级各类档案馆、机关、团体、企事业单位的档案管理人员及信息化建设人员提供标准化、可操作的文档型数据库档案数据存储管理实操指南。

转载、摘编请务必注明出处,并保留本原创声明。未经作者书面许可,任何单位或个人不得将本文用于商业培训、出版发行或盈利性活动。