-
题名基于虚拟日志压缩的数据同步方案
被引量：7
- 1
-
-
作者
张春玲
吕震宇
刘遵峰
-
机构
河北理工大学经济管理学院
河北理工大学学生处
-
出处
《计算机工程》
CAS
CSCD
北大核心
2010年第18期67-69,共3页
-
基金
唐山市重点实验室基金资助项目(06360301A-10)
-
文摘
在基于虚拟日志的数据同步中,当主库端存在对同一记录的频繁修改时,庞大的虚拟日志记录会影响整个数据同步效率。针对该问题,提出一种基于虚拟日志压缩的数据同步方案。虚拟日志压缩通过计算合并日志记录,只保留与数据同步相关的日志信息,从而减少网络数据流量,提高数据同步效率。实验结果表明,该方法适合广域网异构数据库的异步数据同步。
-
关键词
异构数据库
数据同步
虚拟日志
日志压缩
-
Keywords
heterogeneous database
data synchronization
virtual log
log compression
-
分类号
TP311.133.1
[自动化与计算机技术—计算机软件与理论]
-
-
题名一种高效的DNS日志压缩算法
被引量：4
- 2
-
-
作者
王艳峰
王正
阎保平
-
机构
中国互联网络信息中心
中国科学院计算机网络信息中心
中国科学院研究生院
-
出处
《计算机工程》
CAS
CSCD
北大核心
2010年第15期32-35,共4页
-
基金
国家发改委CNGI基金资助项目(CNGI-09-03-04)
中国科学院知识创新基金资助项目(0814081105)
中国科学院计算机网络信息中心青年基金资助项目(CNIC_QN_08006)
-
文摘
CN顶级域名的DNS日志从分布式站点传输到数据处理中心时,对海量数据存储和传输带宽提出极大挑战。针对该问题,提出一种高效的DNS日志压缩算法,利用DNS查询类型的冗余性和DNS查询时间、IP地址和域名等的重复性进行DNS日志压缩。实验结果证明了DNS日志压缩算法在DNS实时监控和分析系统中部署的有效性和高效性。
-
关键词
域名系统
日志压缩
时间空间本地性
-
Keywords
Domain Name System（DNS）
log compression
time and space locality
-
分类号
TP301
[自动化与计算机技术—计算机系统结构]
-
-
题名基于解析器树的日志压缩优化方法
被引量：3
- 3
-
-
作者
刘吉强
何嘉豪
张建成
黄学臻
-
机构
北京交通大学计算机与信息技术学院
山东省计算中心
山东正中信息技术股份有限公司
公安部第一研究所
-
出处
《信息网络安全》
CSCD
北大核心
2022年第4期30-39,共10页
-
基金
国家重点研发计划[2020YFB2103800]
中国国家铁路集团有限公司科技研究开发计划[N2020W005]
山东省重大科技创新工程项目[2019JZZY020128]。
-
文摘
信息系统日志数据对安全分析非常重要,随着日志规模与日俱增,高效地进行日志数据存储和审计成为信息系统安全的关键问题之一。日志数据压缩能够减少对日志数据存储的巨大开销,已经成为日志数据领域的研究热点之一。传统的压缩工具、算法在小规模文本的处理上效果较好,但对于信息系统产生的大规模日志数据并不适用。现有日志压缩算法通过提取日志结构的方式实现数据压缩,但对日志数据中数值变量部分的压缩率和压缩速度的提升不明显。文章提出一种基于解析器树的日志压缩优化方法(TOLC),通过解析器构造解析器树,提取相应的日志模板并进行模板压缩,进而对数值变量部分进行编码压缩。文章通过5个不同类型的大型日志数据集对TOLC进行评估,并与其他方法进行比较。实验结果表明,TOLC在所有数据集上都实现了最高的压缩率,且在大型日志数据集中也表现出了很好的压缩速度,整体上表现最优。
-
关键词
解析器树
日志压缩
模板提取
数值编码
压缩率
-
Keywords
parser tree
log compression
template extraction
numerical code
compression ratio
-
分类号
TP309
[自动化与计算机技术—计算机系统结构]
-
-
题名电力业务系统海量SQL访问日志预处理方法
被引量：1
- 4
-
-
作者
李伟伟
张涛
马媛媛
周诚
-
机构
国网智能电网研究院
-
出处
《电信科学》
北大核心
2015年第S1期120-124,共5页
-
基金
国家电网公司2015年科技项目(No.SGRIXTKJ[2015]-614)~~
-
文摘
随着智能电网的互动化发展,信息内外网边界数据库交互行为日益增多。为更好地应对电力业务系统数据安全审计的需求,解决数据库审计过程中SQL语句容量过大、不易存储和分析的问题,详细设计了一种基于SQL模式分析的电力业务系统SQL访问日志压缩方法。该方法在不丢失原SQL访问语句语义的前提下,实现SQL访问日志的压缩,也具有SQL日志的简单分类的功能,为数据库的安全审计提供基础。系统测试结果表明,通过该方法可以实现SQL访问日志的大幅度压缩,满足电力业务系统数据库行为审计对日志预处理的需求。
-
关键词
电力
安全审计
日志压缩
预处理
-
Keywords
power business
security audit
logs compression
pretreatment
-
分类号
TM76
[电气工程—电力系统及自动化]
TP311.13
[自动化与计算机技术—计算机软件与理论]
-
