基于键值对存储的水电数据中心编码系统 被引量：3

1

作者 翟桂锋 徐丹 +1 位作者 钱锋 夏晨 《水电与抽水蓄能》 2018年第6期19-22,共4页

当前,水电厂各类业务应用的自动化系统间设备命名和编码方式存在差异,导致建立水电一体化数据中心时各业务系统的数据集成和交互困难。本文提出并实现了一种基于键值对存储的水电数据中心编码系统,对水电厂各业务系统的设备对象进行全... 当前,水电厂各类业务应用的自动化系统间设备命名和编码方式存在差异,导致建立水电一体化数据中心时各业务系统的数据集成和交互困难。本文提出并实现了一种基于键值对存储的水电数据中心编码系统,对水电厂各业务系统的设备对象进行全局编码,并提供统一的微服务接口,解决了设备对象命名和编码的差异问题,为水电厂一体化数据中心融合各业务系统的数据提供了基础保障,更为后续基于数据中心的大数据分析和智能化决策提供了先决条件。 展开更多

关键词 键值对存储 水电数据中心 全局编码 微服务

在线阅读 下载PDF 职称材料

分布式键值缓存系统优化策略及其在大型在线旅游平台中的应用

2

作者 练长乐 《数字通信世界》 2025年第1期118-120,共3页

分布式键值缓存系统在大型在线旅游平台中扮演着至关重要的角色,直接影响着平台的性能和用户体验。本文针对当前分布式键值缓存系统在实际应用中面临的挑战,提出了一系列优化策略并在某大型在线旅游平台中进行实践应用。研究结果表明,... 分布式键值缓存系统在大型在线旅游平台中扮演着至关重要的角色,直接影响着平台的性能和用户体验。本文针对当前分布式键值缓存系统在实际应用中面临的挑战,提出了一系列优化策略并在某大型在线旅游平台中进行实践应用。研究结果表明,这些优化策略能够显著提升缓存系统的性能、可靠性和可扩展性,有效支持平台的高并发访问需求和业务快速增长。文中详细阐述这些优化策略的设计思路、实现方法及其在实际环境中的应用效果,旨在为相关领域的研究和实践提供有价值的参考。 展开更多

关键词 分布式缓存 键值存储 性能优化 在线旅游平台 高可用性

在线阅读 下载PDF 职称材料

低带宽场景下防合谋多方隐私集合并集协议

3

作者 张恩 王梦涛 +2 位作者 郑东 禹勇 黄昱晨 《通信学报》 北大核心 2025年第1期210-221,共12页

针对现存的多方隐私集合并集(MPSU)协议存在交互轮数多以及通信开销大等问题,使其无法在低带宽场景中得以有效应用,设计了一种基于不经意键值存储和门限同态加密技术的不经意匹配置换方法,并运用该方法提出了一种半诚实模型下的多方隐... 针对现存的多方隐私集合并集(MPSU)协议存在交互轮数多以及通信开销大等问题,使其无法在低带宽场景中得以有效应用,设计了一种基于不经意键值存储和门限同态加密技术的不经意匹配置换方法,并运用该方法提出了一种半诚实模型下的多方隐私集合并集协议。该协议允许N个参与方共同计算所有集合的并集,且不会泄露任何其他的信息,具有通信轮数少、能抵御N-1个参与方的合谋、通信开销低等优势,比现有最先进的多方隐私集合并集的通信开销降低了65%左右。 展开更多

关键词 多方隐私集合并集 低带宽场景 不经意键值存储 半诚实模型 门限同态加密

在线阅读 下载PDF 职称材料

面向云计算的键值型分布式存储系统研究 被引量：7

4

作者 孙勇 林菲 王宝军 《电子学报》 EI CAS CSCD 北大核心 2013年第7期1406-1411,共6页

对于数据密集型的云计算应用,基于磁盘的存储系统很难同时满足它们对性能与可用性的需求.本文提出了一种以内存为主设备、以磁盘为辅助设备的键值型分布式存储系统M-Cloud,能提供大数据读写、备份及恢复等存储服务功能.M-Cloud通过将数... 对于数据密集型的云计算应用,基于磁盘的存储系统很难同时满足它们对性能与可用性的需求.本文提出了一种以内存为主设备、以磁盘为辅助设备的键值型分布式存储系统M-Cloud,能提供大数据读写、备份及恢复等存储服务功能.M-Cloud通过将数据全部装入服务器集群内存中的方式提高系统整体性能,并设计了分区线性哈希算法以实现负载均衡和高扩展性,设计了相应的数据备份与故障快速恢复策略以保证系统可靠性.仿真实验结果表明,M-Cloud具有较高的性能与可用性,对系统进一步改进和优化后具有应用于实际生产环境中的潜力,可为用户提供高质量的存储服务. 展开更多

关键词 云计算 键值 分布式存储系统 线性哈希 故障恢复

在线阅读 下载PDF 职称材料

基于非易失存储器件的内存键值存储系统的性能研究 被引量：1

5

作者 魏巍 蒋德钧 +1 位作者 熊劲 陈明宇 《高技术通讯》 北大核心 2017年第6期519-529,共11页

分析了互联网应用为满足后端存储系统高性能要求而引用的内存键值存储系统的应用特点,指出:为了永久保存数据,这些系统还需要在后端将数据从易失性的内存拷贝到慢速的非易失存储设备中;将新型的非易失存储器件(NVM)引入内存键值存储系... 分析了互联网应用为满足后端存储系统高性能要求而引用的内存键值存储系统的应用特点,指出:为了永久保存数据,这些系统还需要在后端将数据从易失性的内存拷贝到慢速的非易失存储设备中;将新型的非易失存储器件(NVM)引入内存键值存储系统可减少其性能开销;根据NVM的特征,内存键值系统可采用两种架构:将NVM替代磁盘作为二级存储设备和将NVM替代DRAM直接作为主存储设备。基于上述分析,实现了两种NVM架构的内存键值存储系统,并通过实验分析,总结出了内存键值存储系统选择NVM架构的原则,这些原则可有效指导内存键值存储系统在采用当前以及未来NVM器件时,对架构的选择。其次,还通过理论和实验分析,得出了不同架构下的内存键值系统在软件层的主要开销,指出了未来针对这些系统的软件设计的优化方向。 展开更多

关键词 内存键值存储系统 非易失存储器件(NVM) 持久内存 性能分析 数据持久 化机制

在线阅读 下载PDF 职称材料

Windows2000注册表键值类型的探索 被引量：1

6

作者 史军绒 《现代情报》 北大核心 2005年第6期224-224,F003,共2页

阐述了注册表的操作方法,分析了Windows2000注册表的结构,对Windows2000注册表常用键值类型进行了分类解释说明。

关键词 WINDOWS2000 注册表 键值类型

在线阅读 下载PDF 职称材料

基于Tag-rank的接触屏信息化跨媒体检索系统设计

7

作者 杜鹏飞 席原魁 +2 位作者 孙青 龙甲云 黄林 《电子设计工程》 2025年第3期29-33,共5页

针对接触屏信息交互量较大,导致检索精准度低的问题,设计了基于Tag-rank的接触屏信息化跨媒体检索系统。基于跨媒体交互结构、动态接触屏信息化存储器和跨媒体检索引擎,完成系统硬件设计。在此基础上,通过Tag-rank方法计算词项关联度,... 针对接触屏信息交互量较大,导致检索精准度低的问题,设计了基于Tag-rank的接触屏信息化跨媒体检索系统。基于跨媒体交互结构、动态接触屏信息化存储器和跨媒体检索引擎,完成系统硬件设计。在此基础上,通过Tag-rank方法计算词项关联度,抽取跨媒体关键词,将图像和文本转换到同构数据子空间,构建图像、文本的索引键值,获取两类检索结果,完成基于Tag-rank的接触屏信息化跨媒体检索系统设计。由测试结果可知,所设计系统的图像、文本检索精准度最高分别为0.95和0.97,具有良好的检索效果。 展开更多

关键词 Tag-rank 接触屏信息化 跨媒体检索 索引键值

在线阅读 下载PDF 职称材料

一种基于键值频率的智能化数据库索引方法的研究与实现

8

作者 廖锋 《数据通信》 2022年第5期1-3,30,共4页

现有的传统数据库索引技术检索性能和效率低下,难以应对新的应用场景,不能很好地适应软件与数据库应用发展。本文结合实际场景,基于数据库索引键值频率技术,提出一种智能数据库索引方法。该方法利用键值频率数据,创建可以实时更新的活... 现有的传统数据库索引技术检索性能和效率低下,难以应对新的应用场景,不能很好地适应软件与数据库应用发展。本文结合实际场景,基于数据库索引键值频率技术,提出一种智能数据库索引方法。该方法利用键值频率数据,创建可以实时更新的活跃值索引与补充索引,实现了数据库索引创建智能化和自动化,有效地提升了数据库索引检索的整体性能和查询效率,并在实际的应用中,可以有效提升应用迁移效率,降低迁移成本和维护成本。 展开更多

关键词 数据库 索引 键值频率 智能索引 查询

在线阅读 下载PDF 职称材料

注册表键值设置的实际应用 被引量：2

9

作者 王岚岚 《沈阳工程学院学报（自然科学版）》 2003年第2期45-47,共3页

从初步认识、简单使用、异常情况处理三个方面介绍了注册表及其使用方法。

关键词 注册表 注册表编辑器 键值

在线阅读 下载PDF 职称材料

BOOM-KV:基于RDMA的高性能NVM键值数据库

10

作者 李文捷 蒋德钧 +1 位作者 熊劲 包云岗 《高技术通讯》 CAS 2023年第1期29-41,共13页

随着英特尔傲腾数据中心持久化内存模块(DCPMM)开始进入市场以及远程直接内存访问(RDMA)硬件成本的降低,设计融合非易失性内存(NVM)和RDMA的键值(KV)数据库面临新的机遇和挑战。构建基于NVM和RDMA的KV数据库的关键在于设计一个高效的通... 随着英特尔傲腾数据中心持久化内存模块(DCPMM)开始进入市场以及远程直接内存访问(RDMA)硬件成本的降低,设计融合非易失性内存(NVM)和RDMA的键值(KV)数据库面临新的机遇和挑战。构建基于NVM和RDMA的KV数据库的关键在于设计一个高效的通信协议。遗憾的是,现有工作或采用NVM不感知的RDMA协议,或采用低效的NVM感知的RDMA协议,这导致它们无法最大化KV数据库的性能。本文提出了BOOM协议——一种新型的NVM感知的RDMA协议。相较于NVM不感知的协议,BOOM协议允许直接对远端NVM进行RDMA操作,消除了冗余的数据拷贝;相较于现有的NVM感知的协议,它可以显著减少元数据请求,降低KV请求的端对端延迟。在BOOM协议的基础上构建了BOOM-KV,并针对服务端中央处理器(CPU)利用率和宕机持久化等问题进一步进行优化。将BOOM-KV与最新的研究成果进行对比,结果表明,BOOM-KV能显著降低请求延迟,其中PUT延迟最大降低了42%,GET延迟最大降低了41%,并且展现出良好的扩展性。 展开更多

关键词 非易失性内存(NVM) 远程直接内存访问(RDMA) 键值(KV)数据库

在线阅读 下载PDF 职称材料

PheonixLSM:高性能低空间开销的分布式键值存储本地引擎

11

作者 李润辉 古亮 喻之斌 《集成技术》 2022年第2期28-40,共13页

分布式键值存储将数据复制到多个存储服务器的本地引擎中,并通过一致性协议保证各副本数据的一致性。其中,以日志结构合并树为核心数据结构的实现方式最为常见。然而,面向通用业务模式设计的日志结构合并树,并不适合一致性逻辑的特殊业... 分布式键值存储将数据复制到多个存储服务器的本地引擎中,并通过一致性协议保证各副本数据的一致性。其中,以日志结构合并树为核心数据结构的实现方式最为常见。然而,面向通用业务模式设计的日志结构合并树,并不适合一致性逻辑的特殊业务模式,会引发增删改性能的降低,并在全量修复过程中造成空间放大。针对上述问题,该文提出了一种新型本地引擎PheonixLSM,通过增加增删改操作和回刷操作的约束,消除了分布式键值存储增删改流程中的双写问题,提升了引擎性能。通过重构日志结构合并树底层的SST文件布局,支持删除实时回收空间,消除了全量修复时的额外空间放大。实验结果显示,与原生本地引擎相比,使用PheonixLSM的分布式键值存储系统,增删改性能提升90.7%,全量修复的空间放大从65.6%降至6.4%,并减少了72.3%的修复时间。 展开更多

关键词 分布式系统 键值存储 一致性协议 空间放大

在线阅读 下载PDF 职称材料

基于FPGA的ICN名字解析缓存加速系统 被引量：1

12

作者 李雪彤 陈晓 宋磊 《现代电子技术》 北大核心 2024年第7期109-114,共6页

名字解析服务是ICN网络中获取信息内容的关键。为提升名字解析服务的效率,降低名字解析系统的负载,设计并提出一种基于FPGA的ICN名字解析缓存加速系统。该系统在网络节点的数据面上利用FPGA卸载名字解析功能,实现标识到网络地址的映射存... 名字解析服务是ICN网络中获取信息内容的关键。为提升名字解析服务的效率,降低名字解析系统的负载,设计并提出一种基于FPGA的ICN名字解析缓存加速系统。该系统在网络节点的数据面上利用FPGA卸载名字解析功能,实现标识到网络地址的映射存储,处理需要查找网络地址的转发数据包,同时,该系统支持控制面动态配置映射关系,保证映射存储的更新。实验测试结果表明,该系统在10 Gb/s的测试流量下,对小包的转发率达到4.6 Mpps,并且请求延时低于1.5μs,相较于传统软件实现的键值存储系统处理速度提高了27倍,与使用DPDK内核旁路进行优化的软件相比处理速度提高了4倍。 展开更多

关键词 ICN FPGA 名字解析 键值存储 SDN 哈希表 硬件加速 流水线

在线阅读 下载PDF 职称材料

一种移动互联网序列化数据的传输优化方法 被引量：5

13

作者 王小林 刘敏 +1 位作者 徐宏 邰伟鹏 《安徽工业大学学报（自然科学版）》 CAS 2017年第1期71-75,共5页

数据在移动互联网上通常被序列化成键值对形式实现传输。服务端向移动客户端返回数据集时,键值对的键因按照特定代码规范命名,导致其字符串过长;当移动终端发出复杂查询请求时,将所有查询条件合并为一个查询字符串后发送给服务端,因此,... 数据在移动互联网上通常被序列化成键值对形式实现传输。服务端向移动客户端返回数据集时,键值对的键因按照特定代码规范命名,导致其字符串过长;当移动终端发出复杂查询请求时,将所有查询条件合并为一个查询字符串后发送给服务端,因此,结构化的查询语句关键词被重复传输。针对上述两个增加网络延时、消耗用户流量的问题,在开发架构层面提出一种移动互联网上序列化数据传输优化方法,对实体类属性进行编码,以减少响应结果集的数据量;在复杂查询时,以键值对保存移动客户端发出的查询数据,服务端接收到该数据后只需解析对应的值,再通过一般处理程序中的特定函数即可获得查询内容。实验结果显示该优化传输方法可有效地减少交互数据量和网络响应时间。 展开更多

关键词 序列化 键值对 数据传输 网络延时 移动互联网

在线阅读 下载PDF 职称材料

PetroV分布式文件系统的设计与实现 被引量：3

14

作者 盛秀杰 金之钧 +1 位作者 彭成 景妍 《石油地球物理勘探》 EI CSCD 北大核心 2019年第3期641-649,489,共10页

为了实现可存储ZB级文件数量、单一文件TB级大小的行业基础数据的需求,以及利于实践'端到端'的、驱动油气重大发现的'地质智能'深度学习解决方案,本文设计、开发并验证了一种充分考虑油气勘探行业基础数据特点的分布式... 为了实现可存储ZB级文件数量、单一文件TB级大小的行业基础数据的需求,以及利于实践'端到端'的、驱动油气重大发现的'地质智能'深度学习解决方案,本文设计、开发并验证了一种充分考虑油气勘探行业基础数据特点的分布式文件系统(PetroV Distributed File System,PetroV DFS)。结合全球地理网格剖分编码和地质信息编码,PetroV DFS建立了基于空间位置索引的分布式文件命名、分配与管理机制,可高效管理ZB级数量的文件并快速定位;基于ST-Based KIDA元数据建模下的本地空间数据库集成机制和空间索引、八叉树切分、空间键值对等三种分布式数据子块存储机制,可快速读写一个TB量级基础数据。PetroV DFS具有'地理位置相近、存储位置相近'的特点——同一地理区域的基础数据存储于同一数据中心的同一批机柜,在提升本地基础数据的访问和计算速度的基础上,能'就近'高效利用不同类型基础数据。以440GB叠前地震数据文件的分布式存储、全时窗频率振幅属性分布式计算为例,利用C++泛化编程技术实现的PetroV DFS可有效部署于当前普通计算机中,为后续深入实践不同类型深度学习解决方案提供新的、可行的大数据存储模式。 展开更多

关键词 地质智能 地理网格剖分 八叉树子块 空间键值对 PetroV DFS

在线阅读 下载PDF 职称材料

云网一体化在教育行业的应用

15

作者 胡徽徽 《长江信息通信》 2024年第7期187-189,共3页

文章提出一种将教育信息系统按应用、算力、存储资源分层解耦、云上部署的架构模式,配合入云网络的改造升级,实现突发、超大流量访问的有效承载、算力资源按业务匹配、数据资源统一供配。从而达到消除冗余信息,优质教育信息共享、共用,... 文章提出一种将教育信息系统按应用、算力、存储资源分层解耦、云上部署的架构模式,配合入云网络的改造升级,实现突发、超大流量访问的有效承载、算力资源按业务匹配、数据资源统一供配。从而达到消除冗余信息,优质教育信息共享、共用,学情学况分级管控的目的。 展开更多

关键词 云网一体化 EPON接入网 应用-数据库服务 键值存储体系

在线阅读 下载PDF 职称材料

船舶自动识别系统数据分布式存储方法 被引量：1

16

作者 张正平 杨春 胡勤友 《中国航海》 CSCD 北大核心 2013年第3期10-13,33,共5页

目前船舶存储自动识别系统(AIS)数据主要用关系数据库。随着时间的推移,积累的AIS数据量逐渐增大,面临的问题是如何高效率地存储和查询长期的AIS数据。现利用键值对构建AIS数据存储结构模型,通过建立分布式数据库来存储长期的AIS数据。... 目前船舶存储自动识别系统(AIS)数据主要用关系数据库。随着时间的推移,积累的AIS数据量逐渐增大,面临的问题是如何高效率地存储和查询长期的AIS数据。现利用键值对构建AIS数据存储结构模型,通过建立分布式数据库来存储长期的AIS数据。实验结果表明:构建的分布式数据库模型可以存储海量AIS信息,基于键值对的数据存储结构提高了AIS信息查询速度,为船舶轨迹的长期查询提供了一种有效的方法。 展开更多

关键词 水路运输 船舶自动识别系统 信息 开源分布式数据管理系统 键值对

在线阅读 下载PDF 职称材料

一种对象/关系映射框架的分析和应用 被引量：39

17

作者 朱庆伟 吴宇红 《电子科技》 2004年第1期54-57,60,共5页

论文主要在分析面向对象系统中类及其实例与关系数据库中表的映射的基础上,引入了一种新的对象/关系映射框架:Hibernate。对Hibernate在对象/关系映射方面的优势、应用及其运行机制做了详细的分析。

关键词 对象/关系映射框架 面向对象系统 关系数据库 HIBERNATE 键值

在线阅读 下载PDF 职称材料

基于时间滑动窗口的自适应加权随机抽样算法 被引量：1

18

作者 唐达 刘畅 +1 位作者 岳前进 张建英 《大连理工大学学报》 EI CAS CSCD 北大核心 2012年第5期772-775,共4页

为了构建传感器网络流数据的概要数据,给出了一种基于时间滑动窗口的自适应加权随机抽样算法:AWRS/BTSW算法.算法根据流数据的到达时间和变化情况,赋予流数据一定的键值,根据流数据的键值并结合skipping因子生成概要数据.在深海平台监... 为了构建传感器网络流数据的概要数据,给出了一种基于时间滑动窗口的自适应加权随机抽样算法:AWRS/BTSW算法.算法根据流数据的到达时间和变化情况,赋予流数据一定的键值,根据流数据的键值并结合skipping因子生成概要数据.在深海平台监测系统中,流数据变化不确定,算法可以根据数据的变化情况动态调整抽样方式,在数据变化不稳定的情况下,生成概要数据的准确性高;在数据变化稳定的情况下,生成概要数据的效率高. 展开更多

关键词 流数据 AWRS/BTSW算法 键值 skipping因子

在线阅读 下载PDF 职称材料

基于HBase的乡村智能电网数据自动分析平台设计 被引量：2

19

作者 苏余泉 王玮 +1 位作者 谢海芳 苏锦青 《电子设计工程》 2022年第17期141-145,共5页

针对以往使用的电网数据自动分析平台受到大量用户用电量数据影响,使数据处理过程中出现延迟问题,提出了基于HBase的乡村智能电网数据自动分析平台。使用HBase体系结构,在一个或多个区域服务器中存储指定表的数据。设计数据同步平台,相... 针对以往使用的电网数据自动分析平台受到大量用户用电量数据影响,使数据处理过程中出现延迟问题,提出了基于HBase的乡村智能电网数据自动分析平台。使用HBase体系结构,在一个或多个区域服务器中存储指定表的数据。设计数据同步平台,相互调用访问层应用程序。构建HBase数据模型,提供面向集群存储和在线应用支持功能,确保没有实际存储的列不会占用存储;采用归一化处理方式将用户日用电量简约处理,记录电力消耗情况,在预设的时间间隔内进行映射运算,并将计算结果存储在第n层的监控节点中。将节点中用电参数转化为键值对,表示相应电力消费模式编号,减少延迟现象出现,由此完成电网数据分析。通过实验验证结果可知,该平台分析后的数值均在实际用电量数值范围内,误差也在可控范围内,具有精准的分析效果。 展开更多

关键词 HBASE 乡村智能电网 数据自动分析 Hregion服务器 键值对

在线阅读 下载PDF 职称材料

Hash索引算法综述 被引量：3

20

作者 颜文 陈征 《无线通信技术》 2019年第2期19-24,29,共7页

在这个数据量爆炸增长的时代,如何在海量数据中实现对所需数据快速精准的查找成为必须面对的难题。哈希索引(Hash Index)将数据相关值输入哈希函数中,通过哈希函数计算得到哈希码,从而找到数据对应的存储地址。这种方法大大提高了数据... 在这个数据量爆炸增长的时代,如何在海量数据中实现对所需数据快速精准的查找成为必须面对的难题。哈希索引(Hash Index)将数据相关值输入哈希函数中,通过哈希函数计算得到哈希码,从而找到数据对应的存储地址。这种方法大大提高了数据检索的速度和准确度并优化了存储空间结构,一定程度上解决了海量数据处理较慢的难题,因此被当今学者广为研究。本文将综述哈希索引的定义和特点,介绍哈希索引的传统算法和新兴算法,最后总结全文并展望未来的研究方向。 展开更多

关键词 哈希索引 哈希码 键值 数据检索

在线阅读 下载PDF 职称材料