期刊文献+
共找到6篇文章
< 1 >
每页显示 20 50 100
基于Spark的并行图数据分析系统 被引量:13
1
作者 王虹旭 吴斌 刘旸 《计算机科学与探索》 CSCD 北大核心 2015年第9期1066-1074,共9页
提出了一种基于Spark云计算平台的并行数据分析系统。该系统以大规模图数据分析任务为主,并且支持非图数据分析的应用,集成数据分析算法集与非图数据分析算法集。详细阐述了该系统的架构设计,工作流引擎和动态组件更新技术以及部分并行... 提出了一种基于Spark云计算平台的并行数据分析系统。该系统以大规模图数据分析任务为主,并且支持非图数据分析的应用,集成数据分析算法集与非图数据分析算法集。详细阐述了该系统的架构设计,工作流引擎和动态组件更新技术以及部分并行数据分析算法的设计与实现。通过对多种规模的数据集进行性能测试,以及与传统的Map Reduce平台进行性能对比,证明了该系统相对于以往的图数据挖掘系统可以更高效地完成计算任务,而且也可以有效进行非图数据分析。 展开更多
关键词 云计算 并行算法 图数据分析 数据挖掘 社会网络分析
在线阅读 下载PDF
面向分布式图计算的图划分技术综述
2
作者 尚俊霖 张振宇 +1 位作者 屈稳稳 王晓玲 《计算机研究与发展》 北大核心 2025年第1期90-103,共14页
图结构作为表达事物之间复杂关联的数据结构,被广泛使用在多种应用场景中.随着互联网应用的不断发展,数据规模的不断增加,分布式的图计算系统相较于传统单机系统从运算时间、资源调度等各个方面显现出优越的性能.近年来,基于大规模图数... 图结构作为表达事物之间复杂关联的数据结构,被广泛使用在多种应用场景中.随着互联网应用的不断发展,数据规模的不断增加,分布式的图计算系统相较于传统单机系统从运算时间、资源调度等各个方面显现出优越的性能.近年来,基于大规模图数据的分布式图计算系统使用需求快速增加,图数据划分技术受到了学术界的广泛关注.通过对分布式图计算系统中的图划分技术的研究,首先介绍了面向分布式图计算的图划分的技术背景,给出当前分布式图计算系统中的图划分相关概念的定义以及相关计算模型的分类体系,报告了分布式图计算模型的发展现状.接着对不同的图划分策略中的具体技术进行介绍,通过在不同策略之间进行分析与比较,总结其在各类分布式图计算系统中的优势与不足.最后就分布式图计算系统中图划分技术的发展现状,讨论了其当前存在的挑战与未来的研究方向. 展开更多
关键词 划分 图数据分析与管理 计算 分布式系统 划分
在线阅读 下载PDF
一种基于图分析的不良网络应用快速发现算法 被引量:1
3
作者 刘冰 杨学 +2 位作者 杨琪 李雪妮 马永征 《计算机应用与软件》 北大核心 2022年第11期329-336,共8页
基于主动探测的域名解析数据和从公开来源获取的有效数据,通过分析域名(Domain Name)、IP与自治系统号码(Autonomous System Number,ASN)之间的全局关联关系,提出一种基于图数据路径分析的不良网络应用快速发现优化算法。在域名之间建... 基于主动探测的域名解析数据和从公开来源获取的有效数据,通过分析域名(Domain Name)、IP与自治系统号码(Autonomous System Number,ASN)之间的全局关联关系,提出一种基于图数据路径分析的不良网络应用快速发现优化算法。在域名之间建立反映其关联强度的关系图谱,并通过调整不同参数配置计算真阳率和假阳率来评估算法的实用性和有效性。实验证明,该算法在保持较低假阳率的同时可以获得较高的真阳率,同时利用少量的已知不良种子域名可以快速发现大量的潜在不良域名,从而具有较好的大规模工程化应用前景。 展开更多
关键词 域名解析 图数据分析 关系 不良网络应用 路径
在线阅读 下载PDF
从CBERS-1卫星红外数据看中国遥感器研制 被引量:1
4
作者 夏德深 谢君 《航天返回与遥感》 2001年第1期55-62,共8页
文章对CBERS_1卫星红外遥感器的图像数据从图像的灰度、纹理和边缘3个方面进行分析 ,并与美国Landsat卫星的TM遥感器、MSS遥感器的图像数据进行了对比分析。分析研究表明 ,CBERS_1卫星的红外遥感器的图像数据是具有很好水平的 ,并说明... 文章对CBERS_1卫星红外遥感器的图像数据从图像的灰度、纹理和边缘3个方面进行分析 ,并与美国Landsat卫星的TM遥感器、MSS遥感器的图像数据进行了对比分析。分析研究表明 ,CBERS_1卫星的红外遥感器的图像数据是具有很好水平的 ,并说明中国卫星遥感器的制造、工艺设计、材料。 展开更多
关键词 灰度 纹理 边缘 CBERS-1卫星 红外遥感器 数据分析
在线阅读 下载PDF
Modified image analytical solutions for ground displacement using nonuniform convergence model 被引量:9
5
作者 杨小礼 黄阜 王金明 《Journal of Central South University》 SCIE EI CAS 2011年第3期859-865,共7页
Based on the image theory,the analytical solutions of tunneling-induced ground displacement were derived in conjunction with the nonuniform convergence model.The reasonable value of Poisson ratio in the analytical sol... Based on the image theory,the analytical solutions of tunneling-induced ground displacement were derived in conjunction with the nonuniform convergence model.The reasonable value of Poisson ratio in the analytical solution was discussed.The ground settlement width parameter which could reflect the ground condition was introduced to modify the analytical solutions proposed above,and new analytical solutions were presented.To evaluate the validity of the present solutions using the nonuniform convergence model,the results were compared with the observed values for four engineering projects,including 38 measured data of ground settlement.The agreement shows that the present solutions using the nonuniform convergence model are effective for evaluating the tunneling-induced ground displacements. 展开更多
关键词 subway tunnel ground displacement image method ground settlement width parameter
在线阅读 下载PDF
MR-CLOPE: A Map Reduce based transactional clustering algorithm for DNS query log analysis 被引量:2
6
作者 李晔锋 乐嘉锦 +2 位作者 王梅 张滨 刘良旭 《Journal of Central South University》 SCIE EI CAS CSCD 2015年第9期3485-3494,共10页
DNS(domain name system) query log analysis has been a popular research topic in recent years. CLOPE, the represented transactional clustering algorithm, could be readily used for DNS query log mining. However, the alg... DNS(domain name system) query log analysis has been a popular research topic in recent years. CLOPE, the represented transactional clustering algorithm, could be readily used for DNS query log mining. However, the algorithm is inefficient when processing large scale data. The MR-CLOPE algorithm is proposed, which is an extension and improvement on CLOPE based on Map Reduce. Different from the previous parallel clustering method, a two-stage Map Reduce implementation framework is proposed. Each of the stage is implemented by one kind Map Reduce task. In the first stage, the DNS query logs are divided into multiple splits and the CLOPE algorithm is executed on each split. The second stage usually tends to iterate many times to merge the small clusters into bigger satisfactory ones. In these two stages, a novel partition process is designed to randomly spread out original sub clusters, which will be moved and merged in the map phrase of the second phase according to the defined merge criteria. In such way, the advantage of the original CLOPE algorithm is kept and its disadvantages are dealt with in the proposed framework to achieve more excellent clustering performance. The experiment results show that MR-CLOPE is not only faster but also has better clustering quality on DNS query logs compared with CLOPE. 展开更多
关键词 DNS data mining MR-CLOPE algorithm transactional clustering algorithm Map Reduce framework
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部