基于多槽哈夫曼Trie树的规则引擎快速匹配算法 被引量：3

1

作者 罗谦 唐常杰 +1 位作者 于磊 郑皎凌 《四川大学学报（工程科学版）》 EI CAS CSCD 北大核心 2011年第5期102-108,共7页

为了提高机场类企业数据在海量规则集合中的匹配能力,提出了基于多槽哈夫曼Trie树(MSTHTrie)的规则引擎快速匹配算法。该算法充分利用了规则点属性名数与规则条数之间的不对称特性,将对规则的线性比对转换为对多槽的并行比对,从而在稳... 为了提高机场类企业数据在海量规则集合中的匹配能力,提出了基于多槽哈夫曼Trie树(MSTHTrie)的规则引擎快速匹配算法。该算法充分利用了规则点属性名数与规则条数之间的不对称特性,将对规则的线性比对转换为对多槽的并行比对,从而在稳定的空间复杂度下提高了规则引擎的匹配效率。首先对通用规则进行了严格的形式化描述,并在合理假设条件下证明了槽内规则分布命题和动作数定理;然后基于动作数定理提出了简化操作符的MSH tree算法;随之扩展操作类型提出了MSHTrie算法,使规则引擎有了普适性;最后在国内枢纽机场的业务数据上完成对比实验,表明新算法在空间复杂度上较传统线性匹配算法节约了52.6%,匹配性能上与Policytree算法相比提高了21.3%。 展开更多

关键词 规则引擎 匹配 多槽 哈夫曼树 trie树

在线阅读 下载PDF 职称材料

基于随机分布的多比特Trie树IP数据包分类算法研究 被引量：2

2

作者 尚凤军 潘英俊 +1 位作者 潘雪增 毕斌 《通信学报》 EI CSCD 北大核心 2008年第7期109-117,共9页

在无冲突散列算法和多比特Trie树算法的基础上,提出了一种基于随机分布的IP分类算法,该算法的核心有3点:一是基于目的/源端口和协议域构造无冲突散列,由于该三域的组合数目非常少,避免了空间爆炸;二是将目的/源IP连成比特串后分为4块,每... 在无冲突散列算法和多比特Trie树算法的基础上,提出了一种基于随机分布的IP分类算法,该算法的核心有3点:一是基于目的/源端口和协议域构造无冲突散列,由于该三域的组合数目非常少,避免了空间爆炸;二是将目的/源IP连成比特串后分为4块,每块16bit,并将其中一块映射到一随机空间,将随机数和其余3块进行异或,获得分类索引值,并用此值生成多比特Trie树,一般情况下减小了空间和时间复杂度;三是在Trie树终点存放最终分类规则的索引值,为了保证查找到的规则的正确性,对每一个索引值的源/目的IP地址均匹配一次。通过以上3点改进一般要降低算法的时间复杂度和空间复杂度,通过仿真,当对10000条分类规则进行包分类时,该算法的包分类速度可以达到2Mpacket/s,所消耗的最大内存为1MB。 展开更多

关键词 IP分类 查找算法 多比特trie树 随机分布

在线阅读 下载PDF 职称材料

基于Trie树的词语左右熵和互信息新词发现算法 被引量：12

3

作者 郭理 张恒旭 +1 位作者 王嘉岐 秦怀斌 《现代电子技术》 北大核心 2020年第6期65-69,共5页

由于大量新词的出现,使得中文文本分析产生了较大的困难,因此新词发现成为目前中文自然语言处理中的热点和难点问题。为此,文中提出了一种基于Trie树的词语左右熵和互信息新词发现算法。先根据成词规则,筛选掉文本中的停用词和非中文字... 由于大量新词的出现,使得中文文本分析产生了较大的困难,因此新词发现成为目前中文自然语言处理中的热点和难点问题。为此,文中提出了一种基于Trie树的词语左右熵和互信息新词发现算法。先根据成词规则,筛选掉文本中的停用词和非中文字符,将每个字与其右邻的字组成二元组;然后利用左右信息熵和互信息进行成词概率的计算,根据计算到的成词概率和词频筛选出新词;并且设计了三个实验,验证了算法的有效性和可行性。实验结果表明,该新词发现算法成词准确率较高,比其他新词发现算法时间效率有较大的提高,对于中文分词结果的优化起到重要的作用。 展开更多

关键词 新词发现算法 左右熵 互信息 trie树 算法设计 对比验证

在线阅读 下载PDF 职称材料

一种基于Trie树和扩展B树的RFID标签编码过滤方法研究 被引量：1

4

作者 赵文 刘学洋 +1 位作者 刘殿兴 王立福 《电子学报》 EI CAS CSCD 北大核心 2011年第A03期126-133,共8页

面向EPC模式(EPC Pattern)的标签编码过滤是RFID中间件的主要功能之一.为提高过滤效率,本文给出了一种基于trie树和扩展B树相结合的标签编码过滤方法.通过分析标签编码和EPC模式的结构特征,将系统中大量的EPC模式构造成一个层次查找结构... 面向EPC模式(EPC Pattern)的标签编码过滤是RFID中间件的主要功能之一.为提高过滤效率,本文给出了一种基于trie树和扩展B树相结合的标签编码过滤方法.通过分析标签编码和EPC模式的结构特征,将系统中大量的EPC模式构造成一个层次查找结构,对于EPC模式中的常规编码段采用trie树表达,对于区间形式采用扩展B树表达.查找过程按照编码段由高至低依次进行,并采用了基于位向量集合的优化方法.实验表明标签编码过滤效率受EPC模式数量变化的影响较小,能够有效降低向上层应用传输数据的延迟. 展开更多

关键词 RFID 中间件 EPC模式 过滤 trie树 B树

在线阅读 下载PDF 职称材料

基于Trie树的快速电子词典开发 被引量：1

5

作者 蔡琪 刘东霞 《现代电子技术》 2014年第12期90-92,共3页

当今社会在步入一个大数据时代,时间和效率举足轻重。因此设计和开发出一款能快速检索目标词汇的电子词典具有十分重要的现实意义。开发的电子词典系统运用Windows API开发,采用Trie树的数据结构设计。结果表明:电子词典实现了Trie树结... 当今社会在步入一个大数据时代,时间和效率举足轻重。因此设计和开发出一款能快速检索目标词汇的电子词典具有十分重要的现实意义。开发的电子词典系统运用Windows API开发,采用Trie树的数据结构设计。结果表明:电子词典实现了Trie树结构的存取和快速Hash映射查词,实现主流电子词典常用功能,包括单词查找、添加生词、我的单词本、课程设置、单词测试和帮助等,可满足大部分用户的需求,具有良好的扩展性。 展开更多

关键词 快速检索 trie树 Hash查找 电子词典

在线阅读 下载PDF 职称材料

Trie Hashing结构平均路径长度分析

6

作者 王宏 熊西文 朱振文 《大连理工大学学报》 EI CAS CSCD 北大核心 1991年第5期507-514,共8页

针对 Ｗ．Ｌｉｔｗｉｎ提出的 Ｔｒｉｅ Ｈａｓｈｉｎｇ结构的路径长度分析问题，研究并揭示 了该结构所具有的某些新的性质；建立了必要的分析前提．从而给出了 Ｔｒｉｅ Ｈａｓｈｉｎｇ 结构平均路径长度的分析方法。所得估计式仅与... 针对 Ｗ．Ｌｉｔｗｉｎ提出的 Ｔｒｉｅ Ｈａｓｈｉｎｇ结构的路径长度分析问题，研究并揭示 了该结构所具有的某些新的性质；建立了必要的分析前提．从而给出了 Ｔｒｉｅ Ｈａｓｈｉｎｇ 结构平均路径长度的分析方法。所得估计式仅与外部结点数目有关，理论分析与模拟 实验的结果表明，对于 Ｔｒｉｅ Ｈａｓｈｉｎｇ 结构，文中的分析方法明显优于 Ｋｌｅｉｎ 和 ｗｏｏｄ的类似结果。 展开更多

关键词 T-H结构 路 树 算法分析

在线阅读 下载PDF 职称材料

一种基于trie的频繁项集发现算法 被引量：2

7

作者 郑丽英 《兰州铁道学院学报》 2003年第6期27-29,共3页

挖掘频繁项集是关联规则算法中的关键步骤.分析了hash树作为数据结构实现寻找频繁项集的方法,讨论了数据结构trie及其特性,并提出用trie作数据结构实现频繁项集的快速发现.其特点是:不依赖用户定义的支持度阀值;只需扫描一遍数据库;可... 挖掘频繁项集是关联规则算法中的关键步骤.分析了hash树作为数据结构实现寻找频繁项集的方法,讨论了数据结构trie及其特性,并提出用trie作数据结构实现频繁项集的快速发现.其特点是:不依赖用户定义的支持度阀值;只需扫描一遍数据库;可以快速计算项集的支持度;支持动态数据库. 展开更多

关键词 trie树 频繁项集 发现算法 关联规则算法 数据结构 数据库 HASH树 数据挖掘

在线阅读 下载PDF 职称材料

一种基于Trie的快速IP路由查找算法 被引量：5

8

作者 郜国良 李广军 《微电子学与计算机》 CSCD 北大核心 2011年第6期163-167,共5页

Internet的飞速发展要求核心路由器能够实现快速的分组转发和路由更新功能,实现这一功能的关键是路由表的组织结构和快速的路由查找算法.提出了带有转发域信息树的多分支Trie结构路由查找算法,它由固定步长的多分支Trie结构的路由表和... Internet的飞速发展要求核心路由器能够实现快速的分组转发和路由更新功能,实现这一功能的关键是路由表的组织结构和快速的路由查找算法.提出了带有转发域信息树的多分支Trie结构路由查找算法,它由固定步长的多分支Trie结构的路由表和转发域信息树两部分组成.对于一个长度为w的路由前缀,其查找、插入、删除路由的时间复杂度均为O((w-m)/n+1),其中m、n为Trie树的步长.它解决路由查找过程中快速更新的问题,具有算法简单、查找速度快、易于更新、空间利用率高、便于向IPv6过渡等优点. 展开更多

关键词 最长前缀匹配 trie树 快速查找 快速更新

在线阅读 下载PDF 职称材料

基于Geohash的海战场仿真兴趣实体过滤方法

9

作者 孙康 初阳 《舰船电子工程》 2024年第2期115-118,126,共5页

在虚拟海战场仿真中,按空间地理信息快速过滤出感兴趣的仿真实体能够有效加快仿真进程。在分析了海战场作战仿真中特性的基础上,论文提出了基于Geohash的海战场仿真兴趣实体过滤方法,该方法将改进的前缀树(trie-tree)与Geohash相结合,... 在虚拟海战场仿真中,按空间地理信息快速过滤出感兴趣的仿真实体能够有效加快仿真进程。在分析了海战场作战仿真中特性的基础上,论文提出了基于Geohash的海战场仿真兴趣实体过滤方法,该方法将改进的前缀树(trie-tree)与Geohash相结合,并具体描述了其在探测仿真过程中的应用方式。将所提出的方法与其他的传统算法进行对比实验分析,证明了该方法在海战场仿真中对兴趣实体过滤的有效性。 展开更多

关键词 海战场 实体仿真 Geohash 实体过滤 前缀树

在线阅读 下载PDF 职称材料

完全无冲突散列IP分类算法研究 被引量：5

10

作者 尚凤军 唐红 潘英俊 《通信学报》 EI CSCD 北大核心 2005年第2期87-91,99,共6页

介绍了IP分类技术研究的最新成果,以及IP分类的典型算法。提出了一种基于完全无冲突散列(hash)和跳转表Trie树(NHJTTT)的IP分类算法,通过分析比较,本文提出的算法无论是时间性能还是空间性能均优于无冲突散列查找算法和Grid of Tries算... 介绍了IP分类技术研究的最新成果,以及IP分类的典型算法。提出了一种基于完全无冲突散列(hash)和跳转表Trie树(NHJTTT)的IP分类算法,通过分析比较,本文提出的算法无论是时间性能还是空间性能均优于无冲突散列查找算法和Grid of Tries算法,文中通过仿真给出了最终的分类效果。最后对提出的算法在虚拟环境下做了评判。 展开更多

关键词 IP分类 查找算法 trie树

在线阅读 下载PDF 职称材料

一种基于Aho-Corasick算法改进的多模式匹配算法 被引量：16

11

作者 陈永杰 吾守尔.斯拉木 于清 《现代电子技术》 北大核心 2019年第4期89-93,共5页

目前互联网中以文本存在的数据非常庞大,针对在如此庞大的文本中如何准确、快速地找到多个不同的目标字符串的问题,在介绍常见的模式匹配算法的优点和缺点基础上,结合Trie速多模式匹配算法。根据对比性实验的结果分析得出,改进AC且匹配... 目前互联网中以文本存在的数据非常庞大,针对在如此庞大的文本中如何准确、快速地找到多个不同的目标字符串的问题,在介绍常见的模式匹配算法的优点和缺点基础上,结合Trie速多模式匹配算法。根据对比性实验的结果分析得出,改进AC且匹配速度大约是AC算法的5倍。 展开更多

关键词 字符串匹配 多模式匹配 trie树 双数组 AC算法 匹配速度

在线阅读 下载PDF 职称材料

IPv6网络接入控制方法研究与实现 被引量：3

12

作者 孙文胜 赵玉江 《电子器件》 CAS 2009年第5期981-984,988,共5页

IPv6QACL(可靠访问控制)技术有利于解决下一代网络的可靠接入问题,其功能实现依赖于ACL(访问控制链表)模块与QoS(服务质量)模块的联动。论文给出拥塞避免、优先级标记等典型配置组网,并进行相应的系统功能测试,测试结果表明预期功能实现。

关键词 服务质量 访问控制 分层服务质量 字典树

在线阅读 下载PDF 职称材料

一种IP数据包快速分类算法 被引量：1

13

作者 尚凤军 《东南大学学报（自然科学版）》 EI CAS CSCD 北大核心 2006年第S1期86-89,共4页

为了提高查找效率,在无冲突哈希查找算法和Grid of Tries算法的基础上提出了一种基于无冲突哈希和多比特Trie树(NHMT)的IP分类算法.该算法的核心有3部分:哈希函数的构造,主要是采用基于目的端口和协议两域构造哈希函数,使得在最坏情况... 为了提高查找效率,在无冲突哈希查找算法和Grid of Tries算法的基础上提出了一种基于无冲突哈希和多比特Trie树(NHMT)的IP分类算法.该算法的核心有3部分:哈希函数的构造,主要是采用基于目的端口和协议两域构造哈希函数,使得在最坏情况下完全避免了空间爆炸问题;在Grid of Tries算法的基础上,对Grid of Tries算法改造成修剪的Trie树和多比特Trie树,以减少空间复杂度;在无冲突哈希查找算法的基础上扩展一层用于存放源端口号(或范围),扩展后一般要提高算法的时间复杂度,要通过引入多比特Trie树的方法进行解决.对于空间复杂度方面与无冲突哈希查找算法比较,一般情况下不增加空间复杂度.通过仿真,当对10 000条规则进行包分类时,该算法的分类速度可以达到1 Mbit/s,所消耗的最大内存为8.2 MB. 展开更多

关键词 IP分类 查找算法 trie树 无冲突哈希 Gridoftries

在线阅读 下载PDF 职称材料

多级索引路由查找算法及其实现

14

作者 闫新成 《中兴通讯技术》 2006年第2期45-49,共5页

路由查找是IP网络传输中或者基于IP构建的通信分组网中的重要组成部分。多分枝trie树查找算法是一种快速高效的路由查找算法,但同时也带来了巨大的内存开销。一种改进的多分枝trie树查找算法,即多级索引路由查找算法,将原有算法中的二... 路由查找是IP网络传输中或者基于IP构建的通信分组网中的重要组成部分。多分枝trie树查找算法是一种快速高效的路由查找算法,但同时也带来了巨大的内存开销。一种改进的多分枝trie树查找算法,即多级索引路由查找算法,将原有算法中的二级索引扩展为多级索引,并引入了标志位连续存储的方式,在基本不影响查找效率的前提下,极大地减小了路由索引表的内存开销。 展开更多

关键词 路由 查找算法 trie树 多级索引

在线阅读 下载PDF 职称材料

一种GIS的中文分词算法研究 被引量：2

15

作者 杨晓军 王一莉 《微电子学与计算机》 CSCD 北大核心 2010年第7期173-176,180,共5页

提出了一种应用于GIS领域的中文分词算法.采用将首字和尾种类词用哈希表管理,其余中间字串用Trie树来实现的"首位Hash-Trie树"结构作为词典载体来实现地学词典的高效率存取操作,简化了Trie树的深度,并基于一种改进的正向最大... 提出了一种应用于GIS领域的中文分词算法.采用将首字和尾种类词用哈希表管理,其余中间字串用Trie树来实现的"首位Hash-Trie树"结构作为词典载体来实现地学词典的高效率存取操作,简化了Trie树的深度,并基于一种改进的正向最大匹配的算法,很好的解决了切分歧义和未登录词的问题.实验结果表明,该算法为GIS中文查询语句的正确理解提供了有效的语义信息. 展开更多

关键词 地理信息系统 中文分词 trie树 哈希结构 分词词典

在线阅读 下载PDF 职称材料

一种多模式匹配高效算法的设计与实现 被引量：2

16

作者 李辉 赵辉 李安贵 《北京工商大学学报（自然科学版）》 CAS 2009年第3期65-68,共4页

随着国家信息化的不断推进和计算机网络飞速发展,网络信息安全审计成为网络信息安全中不可或缺的重要组成部分.网络信息安全审计系统从网络关键点采集数据包,对其传送内容进行审计分析,达到网络信息内容的监控.在网络信息安全审计系统中... 随着国家信息化的不断推进和计算机网络飞速发展,网络信息安全审计成为网络信息安全中不可或缺的重要组成部分.网络信息安全审计系统从网络关键点采集数据包,对其传送内容进行审计分析,达到网络信息内容的监控.在网络信息安全审计系统中,需要对大量的关键字进行匹配,匹配算法的性能极大程度地影响了整个审计系统的性能.通过比较分析现有的多模匹配算法,设计实现了一种基于二叉树多模匹配的算法,并在最后通过实验测试,得到了良好的性能指标. 展开更多

关键词 二叉树 多模匹配算法 trie树

在线阅读 下载PDF 职称材料

基于Aho-Corasick自动机算法的概率模型中文分词CPACA算法 被引量：5

17

作者 徐懿彬 《电子科技大学学报》 EI CAS CSCD 北大核心 2017年第2期426-433,共8页

Aho-Corasick自动机算法是著名的多模式串匹配算法,它在模式串失配时,通过fail指针转移至有效的后续状态,存在一个或多个有效的后续状态可能。据此特性,该文提出了一种适应于中文分词的自动机算法。该算法使用动态规划的方法,计算上下... Aho-Corasick自动机算法是著名的多模式串匹配算法,它在模式串失配时,通过fail指针转移至有效的后续状态,存在一个或多个有效的后续状态可能。据此特性,该文提出了一种适应于中文分词的自动机算法。该算法使用动态规划的方法,计算上下文匹配概率,转移至最佳的有效后续状态,即实现了基于字符串匹配的机械分词方法与基于统计概率模型的方法结合。实验结果表明,该算法分词准确率高。 展开更多

关键词 AC自动机 中文分词 动态规划 trie树

在线阅读 下载PDF 职称材料

大容量高带宽路由查找算法设计与FPGA实现 被引量：3

18

作者 彭鼎祥 《现代电子技术》 2023年第15期20-24,共5页

为了解决目前IP路由查表大容量和高吞吐需求的同时,实现低硬件资源成本,提出一种大容量高带宽IP路由查表算法,并完成FPGA实现。算法将FIB表项的存储映射为字典树的数据结构,进行路径压缩和级别压缩以节省存储资源。将字典树根节点信息... 为了解决目前IP路由查表大容量和高吞吐需求的同时,实现低硬件资源成本,提出一种大容量高带宽IP路由查表算法,并完成FPGA实现。算法将FIB表项的存储映射为字典树的数据结构,进行路径压缩和级别压缩以节省存储资源。将字典树根节点信息存储在片内SRAM,子树节点存储于片外DRAM。查找时,在芯片硬件内采用流水线方式优化资源负载均衡,实现片外DRAM的一次访问即可得到结果,实现了单周期线速查表,并支持增量更新。该算法通过FPGA设计实现,并进行仿真和实机验证。结果表明,该方案可同时支持大容量IPv4和IPv6 FIB表项并行查找,与现有方案相比,做到了更大容量、更高带宽和更低成本。 展开更多

关键词 大容量 高带宽 IP路由表 FIB表 最长前缀匹配 FPGA 字典树算法 流水线

在线阅读 下载PDF 职称材料

口令中的热词发现与分析

19

作者 颜锐荣 陈虎 《密码学报》 CSCD 2018年第6期671-679,共9页

词汇是口令集的重要特征,但是对其定量分析一直没有得到足够重视.本文首先提出了基于有效频度的高频词汇(热词)发现方法,较传统方法可以有效排除热词子串的干扰,提升了热词发现的准确性.在我们开发的热词发现软件中,使用了压缩字典树以... 词汇是口令集的重要特征,但是对其定量分析一直没有得到足够重视.本文首先提出了基于有效频度的高频词汇(热词)发现方法,较传统方法可以有效排除热词子串的干扰,提升了热词发现的准确性.在我们开发的热词发现软件中,使用了压缩字典树以提高热词发现的性能.使用上述方法,我们得到了CSDN和RockYou两个口令集中的热词集合.通过分析频度最高的100条热词,我们发现了中国大陆用户和西方国家用户在口令用词方面的区别.与现有语料库的相关性分析,也进一步证实了两者的显著差异.本文还提出通过余弦相似度方法来定量衡量两个口令集合在热词方面的差异.对多个口令集合的分析表明,这种方法可以有效区分不同地域的口令集合.本文所做的研究工作定量地描述了口令集用词特征,对于构造具有针对性的语料库和提升口令猜测效率具有重要意义. 展开更多

关键词 口令 字典树 余弦相似性

在线阅读 下载PDF 职称材料

星载快速路由查找算法设计与实现

20

作者 何婧 赵哲 李园利 《空间电子技术》 2017年第2期8-12,共5页

针对星载路由器的路由查找功能展开研究,分析比较常用的路由查找算法,利用软硬件协同设计的思想,提出了一种基于Hash桶和压缩Trie树相结合的路由查找算法,详细介绍了该算法的数据结构和实现步骤,对算法的性能进行分析比较。结果表明,该... 针对星载路由器的路由查找功能展开研究,分析比较常用的路由查找算法,利用软硬件协同设计的思想,提出了一种基于Hash桶和压缩Trie树相结合的路由查找算法,详细介绍了该算法的数据结构和实现步骤,对算法的性能进行分析比较。结果表明,该设计可满足宽带卫星通信系统高速数据路由查找的需求,实现10 Gbps数据的线速查找。 展开更多

关键词 Hash桶 trie树 路由查找

在线阅读 下载PDF 职称材料