面向NewSQL数据库数据协同持久化的研究 被引量：1

1

作者 左顺 李永坤 许胤龙 《计算机科学》 北大核心 2025年第1期131-141,共11页

现代NewSQL数据库为了提供数据的高可用性,通常会为数据提供多个副本,以便在某个副本不可用时,可以从其他的副本中获取数据。而在数据多副本的情况下,又需要考虑副本间的数据一致性问题,即在某一时刻不同客户端读取某个数据时得到的结... 现代NewSQL数据库为了提供数据的高可用性,通常会为数据提供多个副本,以便在某个副本不可用时,可以从其他的副本中获取数据。而在数据多副本的情况下,又需要考虑副本间的数据一致性问题,即在某一时刻不同客户端读取某个数据时得到的结果应该是相同的,因此引入了事务处理机制。在一个包含多个写操作的交互式事务处理过程中,由于数据存在多个副本,因此每个写入操作需要对所有的主备副本进行写入操作。然而主备副本通常分散在不同的机器上,因此会引入写远端副本的时延,其最终将会增大整个事务的处理时延。针对该问题,提出了数据协同持久化的方案,其主要思想是让客户端在本地缓存事务的写操作日志,在最终提交事务时,客户端首先将事务中的写操作日志进行持久化,并将该日志发送给事务的协调者节点,让协调者进行日志数据的分发处理,从而达到两者协同持久化事务数据的目的。实验结果表明,相较于同步持久化方案,协同持久化方案不仅能降低交互式事务处理的时延,还能提高约38%左右的系统极限吞吐率。 展开更多

关键词 分布式数据库 并发控制 数据持久化 数据一致性 高数据竞争负载

在线阅读 下载PDF 职称材料

多副本分布式事务处理关键技术及典型数据库系统综述 被引量：3

2

作者 黄纯悦 彭起 +4 位作者 张拂晓 王声溢 罗成 张岩峰 于戈 《软件学报》 EI CSCD 北大核心 2024年第1期455-480,共26页

数据复制是分布式数据库提高可用性的重要手段,通过在不同区域放置数据库的部分副本,还可以提高本地读写操作的响应速度,增加副本数量也会提升读负载的线性扩展能力.考虑到这些优良特性,近年来国内外都出现了众多多副本分布式数据库系统... 数据复制是分布式数据库提高可用性的重要手段,通过在不同区域放置数据库的部分副本,还可以提高本地读写操作的响应速度,增加副本数量也会提升读负载的线性扩展能力.考虑到这些优良特性,近年来国内外都出现了众多多副本分布式数据库系统,包括Google Spanner、CockroachDB、TiDB、OceanBase等一系列主流的工业界系统,也出现了包括Calvin、Aria、Berkeley Anna等一系列优秀的学术界系统.然而,多副本数据库带来诸多收益的同时,也带来了一致性维护、跨节点事务、事务隔离等一系列挑战.总结分析现有的复制架构、一致性维护策略、跨节点事务并发控制等技术,对比几个代表性多副本数据库系统之间在分布式事务处理方面上的差异与共同点,并在阿里云环境下搭建跨区域的分布式集群环境,对几个代表性系统的分布式事务处理能力进行了实验测试分析. 展开更多

关键词 分布式事务处理 分布式数据库 数据复制 确定性数据库 跨区域复制数据库

在线阅读 下载PDF 职称材料

跨域双活数据库事务处理的动态优化技术 被引量：1

3

作者 吴昊亮 危建朋 +3 位作者 崔欣宁 张先伟 陈丽 谷峪 《计算机应用》 CSCD 北大核心 2024年第S01期83-88,共6页

跨域双活数据库能为企业提供灾备能力,但传统的灾备节点仅提供备份功能,无法为主服务器分担读写负载,造成了系统瓶颈。如今分布式数据库领域的数据复制架构、数据库节点间共识协议等,为异地双活数据库的发展提供了理论基础。在跨域双活... 跨域双活数据库能为企业提供灾备能力,但传统的灾备节点仅提供备份功能,无法为主服务器分担读写负载,造成了系统瓶颈。如今分布式数据库领域的数据复制架构、数据库节点间共识协议等,为异地双活数据库的发展提供了理论基础。在跨域双活的场景下提出一种基于多主架构的确定性事务处理方案,在原有的承担灾备的基础上提供客观的负载均衡能力。在该架构中,使用确定性乐观并发控制协议保证跨域双活场景下事务执行的正确性,同时应用异步冲突检测优化与动态批大小设置调整系统负载以适应网络环境的变化。在TPC-C基准测试中验证架构的原型实现系统的性能,在网络利用率与事务吞吐量上均取得了较好的效果,与原始分片方案相比事务处理性能提升18%~23%,网络延迟下降了26%~31%。 展开更多

关键词 跨域双活数据库 分布式数据库 事务处理 数据复制

在线阅读 下载PDF 职称材料

基于Oracle高级复制的分布式数据库系统应用研究 被引量：24

4

作者 葛卫民 张钢 舒炎泰 《计算机工程与应用》 CSCD 北大核心 2003年第21期186-188,191,共4页

该文以CIMS工程应用为背景,介绍了一种运用Oracle高级复制技术实现企业远程信息分布式处理的方案;详细讨论了实现中的数据一致性问题,并提出了通过设置手动复制、合理设置自动复制周期解决数据弱一致性和处理时间滞后问题的方法,以及基... 该文以CIMS工程应用为背景,介绍了一种运用Oracle高级复制技术实现企业远程信息分布式处理的方案;详细讨论了实现中的数据一致性问题,并提出了通过设置手动复制、合理设置自动复制周期解决数据弱一致性和处理时间滞后问题的方法,以及基于分组方法解决各种数据冲突的实现策略。 展开更多

关键词 分布式数据库 数据库复制 数据一致性 数据冲突 CIMS工程 ORACLE高级复制技术

在线阅读 下载PDF 职称材料

分布式数据库系统中数据一致性维护方法 被引量：32

5

作者 潘群华 吴秋云 陈宏盛 《计算机工程》 CAS CSCD 北大核心 2002年第9期255-257,共3页

讨论了在分布式数据库系统中,对于各个数据库副本维护数据一致性的问题,介绍了Oracle8i数据库系统中数据复制的基本概念、基本原理、复制配置以及数据复制的基本配置和实现方法。

关键词 分布式数据库系统 数据一致性 纵方法 数据复制 复制环境 计算机

在线阅读 下载PDF 职称材料

分布式数据库数据复制技术的分析与应用 被引量：37

6

作者 盖九宇 张忠能 肖鹤 《计算机应用与软件》 CSCD 北大核心 2005年第7期36-38,41,共4页

本文在分布式数据库系统的基础上,针对分布式数据库的数据存储方式进行了概述,细致地讲述了分布式数据库复制技术的几个关键内容,对Oracle、Sybase、SQLServer数据库的复制技术(方案)进行了综合分析比较,并结合实践经验提出了复制技术... 本文在分布式数据库系统的基础上,针对分布式数据库的数据存储方式进行了概述,细致地讲述了分布式数据库复制技术的几个关键内容,对Oracle、Sybase、SQLServer数据库的复制技术(方案)进行了综合分析比较,并结合实践经验提出了复制技术的方案选择策略,对复制技术的发展进行了展望。 展开更多

关键词 数据复制技术 分布式数据库系统 应用 数据存储方式 ORACLE SYBASE Server 分析比较 选择策略 实践经验 SQL 方案

在线阅读 下载PDF 职称材料

数据复制与一致性 被引量：25

7

作者 林怀忠 陈纯 吴震华 《计算机工程与应用》 CSCD 北大核心 2001年第20期107-108,171,共3页

数据复制是分布式数据库和数据仓库中常用的方法,以提高数据的可用性和系统的性能。文中介绍了在数据库系统中广泛使用的数据复制方法,分析了其优缺点和适用的范围,重点讨论了异步复制方法中的一致性恢复、一致性偏离的度量和数据存取... 数据复制是分布式数据库和数据仓库中常用的方法,以提高数据的可用性和系统的性能。文中介绍了在数据库系统中广泛使用的数据复制方法,分析了其优缺点和适用的范围,重点讨论了异步复制方法中的一致性恢复、一致性偏离的度量和数据存取的限制等问题,给出了数据复制策略的评价目标。 展开更多

关键词 分布式数据库 数据复制 一致性 数据仓库

在线阅读 下载PDF 职称材料

分布式数据库系统中数据一致性维护方法研究 被引量：32

8

作者 陈珉 喻丹丹 涂国庆 《国防科技大学学报》 EI CAS CSCD 北大核心 2002年第3期76-80,共5页

分布式数据库系统是数据库领域中的一个主要研究方向 ,数据一致性维护是分布式数据库系统中的一个非常关键的技术问题。在深入分析和比较各种维护数据一致性方法的基础上 ,提出了一种较为有效的维护数据一致性的方法 ,详细论述了该方法... 分布式数据库系统是数据库领域中的一个主要研究方向 ,数据一致性维护是分布式数据库系统中的一个非常关键的技术问题。在深入分析和比较各种维护数据一致性方法的基础上 ,提出了一种较为有效的维护数据一致性的方法 ,详细论述了该方法如何解决并发执行引起的冲突问题 。 展开更多

关键词 维护方法 分布式数据库 数据一致性 消息队列 数据库管理 数据副本

在线阅读 下载PDF 职称材料

基于C/S与B/S混合架构的开放机房管理系统设计及实现 被引量：16

9

作者 张松 陈志刚 《实验室研究与探索》 CAS 2004年第2期19-21,37,共4页

从某高校合并后机房多而分散、网络设施条件有限的实际情况出发,基于C/S与B/S混合架构,设计并实现了一个集中式处理与分布式处理相结合、实用高效的开放机房管理系统。对实验室管理改革和提高实验室管理水平有一定的借鉴意义。

关键词 实验室管理 机房 管理系统 分布工数据库 C/S B/S 高校 网络结构 设计

在线阅读 下载PDF 职称材料

基于Web Service的数据一致性维护方法 被引量：7

10

作者 邱宁 吕何新 冯淑娟 《计算机工程与设计》 CSCD 北大核心 2006年第14期2564-2566,2569,共4页

随着互联网和分布式数据库系统的广泛应用,如何保证多个数据库之间的数据一致已成为系统可靠运行所要解决的重要问题。而WebService可以通过HTTP、SOAP(XML)等协议为互联网用户提供服务,具有良好的普适性和灵活性。提出了一种基于WebSer... 随着互联网和分布式数据库系统的广泛应用,如何保证多个数据库之间的数据一致已成为系统可靠运行所要解决的重要问题。而WebService可以通过HTTP、SOAP(XML)等协议为互联网用户提供服务,具有良好的普适性和灵活性。提出了一种基于WebService的数据一致性维护方法,并实现了相应的同步一致和异步一致的维护方法。该方法不仅适用于各种分布式数据库,也可应用于相互独立的多个数据库。 展开更多

关键词 WEB SERVICE 分布式数据库 数据一致 同步一致 异步一致

在线阅读 下载PDF 职称材料

一种基于数据相关性的优化数据一致性维护方法 被引量：5

11

作者 周婧 王意洁 李思昆 《计算机学报》 EI CSCD 北大核心 2008年第5期741-754,共14页

针对数据一致性中的数据相关性问题,提出一种优化的数据一致性维护方法.在该方法中,数据对象按固定大小分块,并以数据块作为数据管理的基本单位;数据更新利用Bloomfilter技术压缩表示,并进行双路径传播;发起方和协商方在一致性维护过程... 针对数据一致性中的数据相关性问题,提出一种优化的数据一致性维护方法.在该方法中,数据对象按固定大小分块,并以数据块作为数据管理的基本单位;数据更新利用Bloomfilter技术压缩表示,并进行双路径传播;发起方和协商方在一致性维护过程中,分别调用各自的协商算法检测和解决更新冲突;动态数据管理算法调节数据更新过程中的动态数据块变化,对数据块进行合并或分解.模拟测试结果表明,在选取适当范围内的分块大小时,该方法在一致性维护开销、动态性和鲁棒性方面均具有较好的性能.文中给出了选定适当分块大小的指导性方法. 展开更多

关键词 P2P分布存储系统 数据复制 数据一致性 数据相关性 更新冲突

在线阅读 下载PDF 职称材料

分布式系统中数据复制的研究与应用 被引量：7

12

作者 张秋余 王璐 《计算机工程与设计》 CSCD 北大核心 2005年第5期1185-1186,1189,共3页

维持数据的一致性是复制数据库并发执行的关键。介绍分析了MSSQLServer2000中内置的数据复制构件以及MSSQLServer2000的事务模型,最后结合实际的应用软件开发对数据复制的并发控制原理与措施进行了相关实现。

关键词 分布式数据库 数据复制 事务 并发控制 一致性

在线阅读 下载PDF 职称材料

分布式数据库在商业供应链系统中的应用 被引量：5

13

作者 王雪立 关永 韩相军 《计算机工程与设计》 CSCD 北大核心 2006年第17期3299-3301,共3页

随着网络中数据库应用的发展,使得分布式数据库的应用领域得到快速的扩展。针对商业流通企业大规模、分散式经营以及集团化管理的模式,提出了在商业供应链系统中采用分布式数据库的结构设计方案,对供应链系统的数据库体系进行了分析,对... 随着网络中数据库应用的发展,使得分布式数据库的应用领域得到快速的扩展。针对商业流通企业大规模、分散式经营以及集团化管理的模式,提出了在商业供应链系统中采用分布式数据库的结构设计方案,对供应链系统的数据库体系进行了分析,对在数据库设计过程中的一些关键问题进行探讨并给出了解决方法。以Oracle9i数据库系统为例,介绍了采用增量复制、分组、半连接技术,进行数据复制、解决数据冲突以及进行查询优化的实现方法。 展开更多

关键词 分布式数据库 供应链管理系统 数据库复制 数据冲突 查询优化

在线阅读 下载PDF 职称材料

高效同步复制模型的研究 被引量：6

14

作者 舒后 段成华 《计算机工程与应用》 CSCD 北大核心 2003年第8期194-197,共4页

数据复制是分布式数据库中常用的方法,以提高数据的可用性和系统的性能。文章引入若干技术解决同步复制方法的缺陷,提出了一个高效同步复制的模型,给出了事务的具体处理过程。

关键词 组通信 原子广播 数据复制 分布式数据库

在线阅读 下载PDF 职称材料

数据库集群的“无应答严次序发布传播”复制策略(英文) 被引量：1

15

作者 刘晖 沈钧毅 +1 位作者 彭勤科 邢东山 《小型微型计算机系统》 CSCD 北大核心 2003年第12期2248-2254,共7页

数据库集群服务器的关键技术是数据复制 .本文在对比分布式文件系统、可靠型多播、对象组服务以及分布式内存等技术的基础上 ,提出了“无应答严次序发布传播”复制策略 .“发布传播”类似但不同于“发布订阅”模型 .该策略采用了IP多播... 数据库集群服务器的关键技术是数据复制 .本文在对比分布式文件系统、可靠型多播、对象组服务以及分布式内存等技术的基础上 ,提出了“无应答严次序发布传播”复制策略 .“发布传播”类似但不同于“发布订阅”模型 .该策略采用了IP多播、双钥锁和基于全局 /局部 /状态次序编号的次序管理机制 .双钥锁允许加锁者或下一个申请者释放互斥锁 .次序管理遵循 4个原则来避免“乱序”、“意图歪曲”、“因果牵制”和“反向因果牵制”四个数据不一致问题 .本文详细讨论了该策略的设计目标、主要问题及解决途径、特征、基本原则以及算法轮廓 . 展开更多

关键词 集群 数据库集群服务器 数据一致性 互斥锁 执行次序 无应答严次序发布传播 复制策略

在线阅读 下载PDF 职称材料

一种数据库中间件的配置服务的研究和实现 被引量：2

16

作者 宋怀明 焦丽梅 孙凝晖 《小型微型计算机系统》 CSCD 北大核心 2007年第3期438-442,共5页

在基于事件流的大规模数据密集型系统中,数据可分为事件流数据和事件配置数据两大类,配置数据表示事件流的规则.在shared-nothing结构下,配置数据一般采用全复制的方式分布到各个数据库节点,用于和事件流数据的联合查询.采用全复制的配... 在基于事件流的大规模数据密集型系统中,数据可分为事件流数据和事件配置数据两大类,配置数据表示事件流的规则.在shared-nothing结构下,配置数据一般采用全复制的方式分布到各个数据库节点,用于和事件流数据的联合查询.采用全复制的配置数据,修改操作必须在所有节点上进行,数据的一致性控制和多节点的事务处理成为此类数据管理的关键问题.对配置数据的特点及其管理策略进行分析,并成功的在DBroker系统中实现了配置数据一致性控制. 展开更多

关键词 shared—nothing DBroker 大规模数据密集型系统 数据库中间件 多复制一致性 分布式事务

在线阅读 下载PDF 职称材料

广域网系统中的数据复制方案 被引量：2

17

作者 王晓峰 李宛洲 《计算机工程》 CAS CSCD 北大核心 2001年第4期116-117,190,共3页

在分析当前比较流行的几种数据复制技术的基础上，根据系统的实际情况，提出了将基于Sybase的复制服务器技术与自行开发的、以加密文件为传送媒质的复制方法相结合的复制方案。

关键词 广域网系统 数据复制 计算机网络 数据库 复制服务器

在线阅读 下载PDF 职称材料

DDBS中实现分割数据库重构的一致性算法 被引量：1

18

作者 李玉忱 张林建 石冰 《计算机研究与发展》 EI CSCD 北大核心 1998年第10期907-910,共4页

如何使分割后的ＤＤＢＳ保持多复本之间的数据一致性，是ＤＤＢＳ中的一个重要问题．文中提出了一种有效的解决分割数据库重构的一致性算法，详细地介绍了算法的有关定义和详细描述．可以证明此算法是正确的和高效的．

关键词 DDBS 数据一致性 重构 数据库 算法

在线阅读 下载PDF 职称材料

Oracle 10g分布式数据库技术在云南地震观测数据库系统中的应用 被引量：3

19

作者 武孔春 牛从达 倪泰山 《地震研究》 CSCD 北大核心 2008年第1期89-94,共6页

介绍了Oracle 10g分布式数据库技术的基本原理,以及分布式数据库在地震观测数据处理方面的优势;应用Oracle 10g数据库技术,设计了云南地震观测分布式数据库系统结构,阐述了分布式地震观测数据库的实现过程及相关技术,有效地解决了数据... 介绍了Oracle 10g分布式数据库技术的基本原理,以及分布式数据库在地震观测数据处理方面的优势;应用Oracle 10g数据库技术,设计了云南地震观测分布式数据库系统结构,阐述了分布式地震观测数据库的实现过程及相关技术,有效地解决了数据分散和集中管理的矛盾。 展开更多

关键词 分布式数据库系统 数据共享 数据复制 分布式查询

在线阅读 下载PDF 职称材料

电厂数据多级复制与集成系统的设计与实现 被引量：1

20

作者 李兵 黄珊 石晓军 《计算机工程》 CAS CSCD 2012年第7期210-212,216,共4页

为获取信息系统的实时数据,实现跨分区网络的实时数据复制与集成,研究复杂网络环境下企业异构数据库平台之间的实时数据复制与集成方法,提出与应用无关的多级异步数据复制与集成方案。分析结果表明,根据该方案建立的复制系统可节约开发... 为获取信息系统的实时数据,实现跨分区网络的实时数据复制与集成,研究复杂网络环境下企业异构数据库平台之间的实时数据复制与集成方法,提出与应用无关的多级异步数据复制与集成方案。分析结果表明,根据该方案建立的复制系统可节约开发成本,适用于多种网络环境。 展开更多

关键词 数据复制 数据同步 分布式数据库 异构数据库 实时数据 触发器

在线阅读 下载PDF 职称材料