检索结果-维普期刊中文期刊服务平台

大规模数据集Spark并行优化谱聚类: 1; 作者吕洪林尹青山《测绘通报》 CSCD 北大核心 2019年第12期96-100,共5页; 针对已有大规模数据集并行谱聚类算法的计算耗时和资源占用巨大等问题,基于当前批处理和图计算兼顾的Spark并行技术,提出了大规模数据集谱聚类的并行优化改进算法,算法通过并行单向迭代避免了相似矩阵计算时的数据重复计算,通过并行位... 展开更多; 关键词大规模集谱聚类近似特征向量 spark并行框架 K-means距离计算优化; 在线阅读下载PDF 职称材料

复杂属性条件下基于Spark的clique社区搜索算法: 2; 作者佘鑫何震瀛《计算机工程》 CAS CSCD 北大核心 2021年第12期54-61,70,共9页; 现有的社区搜索算法难以在网络中找到满足给定复杂属性条件的社区。同时,随着网络规模的不断扩大,单机串行的社区搜索算法也已无法有效地处理大规模的网络数据。针对复杂属性条件下的clique社区搜索问题,提出一种基于Spark的搜索算法。... 展开更多; 关键词社区搜索复杂属性条件布尔表达式 spark并行计算框架 clique结构; 在线阅读下载PDF 职称材料

基于车牌识别大数据的伴随车辆组发现方法被引量：13: 3; 作者曹波韩燕波王桂玲《计算机应用》 CSCD 北大核心 2015年第11期3203-3207,共5页; 基于对车牌识别大数据的处理与分析,可以完成伴随车辆组的发现,在涉案车辆追踪等方面具有广泛的应用。然而当前单一机器模式下伴随车辆组发现算法存在时间和空间上处理性能低下等问题。针对此问题,提出了一种伴随车辆组发现方法——FP-... 展开更多; 关键词智能交通系统车牌识别伴随车辆组 FP-GROWTH算法 spark并行框架; 在线阅读下载PDF 职称材料

串行式混合类型航道船舶交通组织优化被引量：1: 4; 作者王志强张新宇 +1 位作者李倍莹王婧贇《计算机应用与软件》北大核心 2023年第2期26-32,39,共8页; 随着港口航道类型逐渐向多样化、复杂化的混合类型趋势发展,港口交通问题愈发严峻。调研国内外港口混合类型航道,抽象出一种串行式简单混合类型航道作为研究对象。分析混合航道船舶交通状况,构建以单向/混合通航模式转化、混合航道异类... 展开更多; 关键词混合类型航道船舶交通组织优化分布式多目标遗传算法 spark并行计算框架; 在线阅读下载PDF 职称材料

题名大规模数据集Spark并行优化谱聚类: 1; 作者吕洪林尹青山; 机构辽宁对外经贸学院吉林大学; 出处《测绘通报》 CSCD 北大核心 2019年第12期96-100,共5页; 基金辽宁对外经贸学院博士科研启动基金(2019XJLXBSJJ002) 辽宁省教育厅科学研究项目(ldxy2017008); 文摘针对已有大规模数据集并行谱聚类算法的计算耗时和资源占用巨大等问题,基于当前批处理和图计算兼顾的Spark并行技术,提出了大规模数据集谱聚类的并行优化改进算法,算法通过并行单向迭代避免了相似矩阵计算时的数据重复计算,通过并行位置变换、标量乘法替换及距离缩放优化算法的资源占用,通过近似特征向量替代进一步优化算法的计算量。试验结果验证了算法近特征向量的有效性及在大规模数据集下良好聚类性能和扩展性。; 关键词大规模集谱聚类近似特征向量 spark并行框架 K-means距离计算优化; Keywords large-scale spectral clustering approximate eigenvector spark parallel computing K-means distance calculation optimization; 分类号 P208 [天文地球—地图制图学与地理信息工程]; 在线阅读下载PDF 职称材料

题名复杂属性条件下基于Spark的clique社区搜索算法: 2; 作者佘鑫何震瀛; 机构复旦大学软件学院复旦大学计算机科学技术学院; 出处《计算机工程》 CAS CSCD 北大核心 2021年第12期54-61,70,共9页; 基金国家重点研发计划“精准公共法律服务支撑技术与装备研究”(2018YFC0830900)。; 文摘现有的社区搜索算法难以在网络中找到满足给定复杂属性条件的社区。同时,随着网络规模的不断扩大,单机串行的社区搜索算法也已无法有效地处理大规模的网络数据。针对复杂属性条件下的clique社区搜索问题,提出一种基于Spark的搜索算法。在Spark并行计算框架的基础上,结合图的结构特征和内容属性,根据由布尔表达式定义的复杂属性条件采取不同的搜索策略,搜索时利用属性的搜索成本和扩展成本进行局部优化,从而加快搜索过程。实验结果表明,与结构优先或属性优先的社区搜索算法相比,该算法在不同属性条件、网络规模和节点数目的情况下均能保证搜索准确性并提高搜索效率。; 关键词社区搜索复杂属性条件布尔表达式 spark并行计算框架 clique结构; Keywords community search complex attribute condition Boolean expression spark parallel computing framework clique structure; 分类号 TP18 [自动化与计算机技术—控制理论与控制工程]; 在线阅读下载PDF 职称材料

题名基于车牌识别大数据的伴随车辆组发现方法被引量：13: 3; 作者曹波韩燕波王桂玲; 机构山东科技大学信息科学与工程学院大规模流数据集成与分析技术北京市重点实验室(北方工业大学); 出处《计算机应用》 CSCD 北大核心 2015年第11期3203-3207,共5页; 基金北京市属高等学校创新团队建设与教师职业发展计划项目(IDHT20130502) 北京市自然科学基金重点项目(4131001); 文摘基于对车牌识别大数据的处理与分析,可以完成伴随车辆组的发现,在涉案车辆追踪等方面具有广泛的应用。然而当前单一机器模式下伴随车辆组发现算法存在时间和空间上处理性能低下等问题。针对此问题,提出了一种伴随车辆组发现方法——FP-DTC方法。该方法将传统的FP-Growth算法利用分布式处理框架Spark进行了并行化,并作了相应的改进和优化来更加高效地发现伴随车辆组。实验结果的分析表明,提出的方法能够很好地解决车牌识别大数据上的伴随车辆组发现问题,性能相比采用同样方法的Hadoop实现提升了近4倍。; 关键词智能交通系统车牌识别伴随车辆组 FP-GROWTH算法 spark并行框架; Keywords Intelligence Transportation System （ITS） license plate recognition travelling companions FP-Growth algorithm spark parallel framework; 分类号 TP391.41 [自动化与计算机技术—计算机应用技术]; 在线阅读下载PDF 职称材料

题名串行式混合类型航道船舶交通组织优化被引量：1: 4; 作者王志强张新宇李倍莹王婧贇; 机构大连海事大学海上智能交通研究组; 出处《计算机应用与软件》北大核心 2023年第2期26-32,39,共8页; 基金国家自然科学基金项目(51779028)。; 文摘随着港口航道类型逐渐向多样化、复杂化的混合类型趋势发展,港口交通问题愈发严峻。调研国内外港口混合类型航道,抽象出一种串行式简单混合类型航道作为研究对象。分析混合航道船舶交通状况,构建以单向/混合通航模式转化、混合航道异类子航道间通航模式切换、港池连接水域船舶交通冲突消解等为约束的串行式简单混合类型航道船舶交通组织优化模型。基于Spark并行计算框架,结合NSGA-II算法遗传操作天然并行性特点,提出一种Spark分布式多目标遗传算法,将全部种群分散在多节点上并行执行算法的遗传操作。实验表明,提出的算法具有较快的收敛速度和较好的稳定性,模型求解出的优化方案合理、有效。; 关键词混合类型航道船舶交通组织优化分布式多目标遗传算法 spark并行计算框架; Keywords Mixed channel Ship traffic organization optimization Distributed multi-objective genetic algorithm spark parallel computing framework; 分类号 TP3 [自动化与计算机技术—计算机科学与技术] U691.32 [交通运输工程—港口、海岸及近海工程]; 在线阅读下载PDF 职称材料

	题名	作者	出处	发文年	被引量	操作
1	大规模数据集Spark并行优化谱聚类	吕洪林尹青山	《测绘通报》 CSCD 北大核心	2019	0	在线阅读下载PDF 职称材料
2	复杂属性条件下基于Spark的clique社区搜索算法	佘鑫何震瀛	《计算机工程》 CAS CSCD 北大核心	2021	0	在线阅读下载PDF 职称材料
3	基于车牌识别大数据的伴随车辆组发现方法	曹波韩燕波王桂玲	《计算机应用》 CSCD 北大核心	2015	13	在线阅读下载PDF 职称材料
4	串行式混合类型航道船舶交通组织优化	王志强张新宇李倍莹王婧贇	《计算机应用与软件》北大核心	2023	1	在线阅读下载PDF 职称材料