大数据下基于房屋交易网站的数据获取的二手房价格走势分析——以上海为例

1

作者 张汉中 张倩 +2 位作者 董起航 周小平 王斌 《科学技术创新》 2017年第21期142-144,共3页

随着城市化进程的不断加深,互联网技术的飞速发展,以及人们对于便于工作的住房需求,致使房屋交易日趋活跃。房价是房地产市场健康稳定的重要指标。预测房价的变化有助于对房地产市场有一个清醒的认识。本文通过利用Python语言,自动提取... 随着城市化进程的不断加深,互联网技术的飞速发展,以及人们对于便于工作的住房需求,致使房屋交易日趋活跃。房价是房地产市场健康稳定的重要指标。预测房价的变化有助于对房地产市场有一个清醒的认识。本文通过利用Python语言,自动提取二手房屋交易信息,并针对房屋成交量、成交户型、看房人数等多种因素进行分析,通过统计图表分析上海市某一地区的房屋交易的价格变化以及相应地区的交易活跃度,从而对二手房价走势作出预测。 展开更多

关键词 房屋交易网站 网络爬虫 房价影响因素

在线阅读 下载PDF 职称材料

基于大数据的电力系统运维技术研究 被引量：4

2

作者 鞠冬彬 《通信电源技术》 2018年第11期47-49,共3页

针对电力公司在服务请求和服务人员数量上有冲突,设计一种智能客服系统,该系统主要分为5大模块,利用大数据技术将工单作为自动运维知识库的来源,进行提取存储。利用自然语言处理技术将问句进行分词处理,词向量的转换,采用句子相似度模... 针对电力公司在服务请求和服务人员数量上有冲突,设计一种智能客服系统,该系统主要分为5大模块,利用大数据技术将工单作为自动运维知识库的来源,进行提取存储。利用自然语言处理技术将问句进行分词处理,词向量的转换,采用句子相似度模型计算问句相似度,与知识库进行匹配从而获取答案,实现自动客服,提供更加有效的服务,最终降低人工劳动。 展开更多

关键词 系统运维 大数据 自然语言处理 智能问答

在线阅读 下载PDF 职称材料

3-PRR并联机器人机构运动学建模与分析 被引量：15

3

作者 陈修龙 陈天祥 +1 位作者 李跃文 蒙昭如 《山东科技大学学报（自然科学版）》 CAS 北大核心 2018年第5期79-87,共9页

对3-PRR并联机器人机构的运动学建模和运动特性进行分析研究。建立了机构的位置、速度、加速度运动学正解及反解的数学模型,得出特定轨迹下驱动杆的杆长、速度和加速度的变化曲线,利用ADAMS仿真验证了运动学建模的正确性;分析了机构在... 对3-PRR并联机器人机构的运动学建模和运动特性进行分析研究。建立了机构的位置、速度、加速度运动学正解及反解的数学模型,得出特定轨迹下驱动杆的杆长、速度和加速度的变化曲线,利用ADAMS仿真验证了运动学建模的正确性;分析了机构在不同姿态下的工作空间;推导出机构的雅克比矩阵,据此分析了不同姿态下机构的条件数、最小奇异值、可操作性等特性。 展开更多

关键词 并联机器人机构 运动学 工作空间 雅克比矩阵

在线阅读 下载PDF 职称材料

基于视觉的并联机器人守门控制技术研究

4

作者 王鹏 高雪霞 +2 位作者 徐世许 高军伟 伍经纹 《青岛大学学报（工程技术版）》 CAS 2017年第1期58-62,共5页

针对视觉技术在并联机器人上的应用特点,本文基于视觉传感器的二自由度Delta机器人的守门控制技术,提出了一种对运动目标的轨迹进行预判和定位的控制算法。通过视觉控制器对运动小球的视觉图像进行处理,从而获取运动坐标,并对目标进行... 针对视觉技术在并联机器人上的应用特点,本文基于视觉传感器的二自由度Delta机器人的守门控制技术,提出了一种对运动目标的轨迹进行预判和定位的控制算法。通过视觉控制器对运动小球的视觉图像进行处理,从而获取运动坐标,并对目标进行轨迹预判和视觉跟踪,使机器人在目标位置准确拦截小球。同时,利用ST语言在运动控制专用软件Sysmac Studio中编写机器人的运动控制程序并进行3D仿真。仿真结果表明,该算法通过对目标物体提前匹配图像信息可快速定位并执行拦截,避免机械臂多余动作,提高了动作效率。该算法已成功应用到机器人小球对打比赛中,并获得了较好的效果。该研究对Delta机器人抓取运动目标具有一定的实用价值。 展开更多

关键词 Delta机器人 视觉图像分析 轨迹预判 定位与拦截 3D仿真

在线阅读 下载PDF 职称材料

基于状态约束的永磁同步电机的位置跟踪控制 被引量：1

5

作者 刘莹莹 马玉梅 +2 位作者 于金鹏 王晓玲 曲子扬 《青岛大学学报（工程技术版）》 CAS 2016年第3期23-28,共6页

针对传统反步法无法约束永磁同步电动机的状态量和控制量的问题,本文运用模糊自适应反步法对永磁同步电动机进行位置跟踪控制,同时基于约束李雅普诺夫函数对电机系统的状态量和控制量进行了约束。为验证本文方法的有效性,采用Matlab进... 针对传统反步法无法约束永磁同步电动机的状态量和控制量的问题,本文运用模糊自适应反步法对永磁同步电动机进行位置跟踪控制,同时基于约束李雅普诺夫函数对电机系统的状态量和控制量进行了约束。为验证本文方法的有效性,采用Matlab进行仿真分析,仿真结果表明,本文设计的控制器使所有状态都在预定义的约束状态空间中,跟踪误差也收敛到原点很小的邻域内,实现了对永磁同步电动机快速有效的位置跟踪控制;系统的输出可以很好的跟踪期望信号,电机的各个状态量都在约束空间内,控制器输入ud和uq都稳定在一个有界区域内。该研究对实际系统具有一定的应用价值。 展开更多

关键词 永磁同步电动机 状态约束 反步法 位置跟踪 非线性系统

在线阅读 下载PDF 职称材料

结合颅骨形态特征与神经网络的民族判别 被引量：1

6

作者 孙慧杰 赵俊莉 +3 位作者 郑鑫 热孜万古丽·夏米西丁 李奕 周明全 《北京航空航天大学学报》 EI CAS CSCD 北大核心 2021年第3期641-649,共9页

针对颅骨民族判别问题,提出结合颅骨形态特征与神经网络的判别方法,可以推进法医人类学的发展,加快探索民族发展历程。首先,根据颅骨形态学相关研究,提取36个维吾尔族和汉族颅骨数据的几何特征;其次,采用反向传播神经网络(BPNN)对特征... 针对颅骨民族判别问题,提出结合颅骨形态特征与神经网络的判别方法,可以推进法医人类学的发展,加快探索民族发展历程。首先,根据颅骨形态学相关研究,提取36个维吾尔族和汉族颅骨数据的几何特征;其次,采用反向传播神经网络(BPNN)对特征向量进行民族判别,并通过Adam算法对网络进行优化,避免陷入局部最优值,添加正则化项保证算法稳定性;最后,分别采用2种网络结构进行对比实验,输入层、隐藏层和输出层的神经元个数分别为36、6、2和36、12、2,并设置不同初始学习率进行对比实验。结果表明:隐藏层神经元个数为12、学习率为0.0001时,分类精度最高,测试阶段平均准确率最高为97.5%。为了验证所提方法的普适性,生成116例国外颅骨数据进行实验,测试阶段平均准确率为90.96%。相比较于支持向量机(SVM)、决策树、KNN、Fisher等机器学习方法,所提方法学习能力更强且分类精度有明显提升。 展开更多

关键词 颅骨形态特征 反向传播神经网络(BPNN) 颅骨民族判别 机器学习 Adam算法

在线阅读 下载PDF 职称材料

基于区块链技术的社交网络中舆情传播模型 被引量：21

7

作者 宾晟 孙更新 周双 《应用科学学报》 CAS CSCD 北大核心 2019年第2期191-202,共12页

随着区块链技术的产生和发展,出现了利用区块链技术的去中心化共识方式为用户产生的内容进行贡献定价的新型社交网络.基于网络传播和区块链理论,提出针对基于区块链技术的社交网络的舆情传播模型,考虑该类社交网络中由合理量化价值贡献... 随着区块链技术的产生和发展,出现了利用区块链技术的去中心化共识方式为用户产生的内容进行贡献定价的新型社交网络.基于网络传播和区块链理论,提出针对基于区块链技术的社交网络的舆情传播模型,考虑该类社交网络中由合理量化价值贡献而产生的激励机制对于用户传播信息产生的影响,构建在不同传播行为下的收益-风险矩阵,进而界定传播模型中各状态间的转换过程和转移概率.在实验仿真中,通过对转发概率取值的分析说明了区块链社交网络中的激励机制对信息传播的影响.并且通过收益-风险矩阵的稳定策略对于转发概率的影响,验证了该模型有助于打破网络舆情管理瓶颈,遏制虚假网络舆情传播,实现生态良好的网络舆情传播环境. 展开更多

关键词 区块链 社交网络 舆情传播模型 激励机制

在线阅读 下载PDF 职称材料

基于观测器的异步电动机命令滤波反步技术

8

作者 牛浩 马玉梅 +2 位作者 于金鹏 史发涛 孙凤龙 《青岛大学学报（工程技术版）》 CAS 2016年第3期11-17,共7页

针对异步电动机自身结构中的参数不确定性和易存在外部负载扰动问题,本文基于反步控制技术,选择状态观测器来观测异步电机的转速,采取模糊逻辑系统逼近电机模型中未知的非线性函数,利用命令滤波技术解决在传统反步法中存在的计算爆炸问... 针对异步电动机自身结构中的参数不确定性和易存在外部负载扰动问题,本文基于反步控制技术,选择状态观测器来观测异步电机的转速,采取模糊逻辑系统逼近电机模型中未知的非线性函数,利用命令滤波技术解决在传统反步法中存在的计算爆炸问题,实现对异步电动机的位置跟踪控制,并利用Matlab软件进行仿真验证。仿真结果表明,本文所提出的控制方法仍然可以有效地克服异步电动机系统参数未知性以及外部负载扰动等问题,使目标信号能够快速跟踪期望信号,保证跟踪误差收敛到原点很小的邻域内,最终达到对异步电动机的快速有效的位置跟踪控制。该研究具有较高的实际应用价值。 展开更多

关键词 异步电动机 位置跟踪 观测器 命令滤波技术 反步法

在线阅读 下载PDF 职称材料

基于差异网络的遗传病病理提取方法研究

9

作者 艾文文 邵峰晶 +2 位作者 胡建龙 孙仁诚 吴舜尧 《青岛大学学报（工程技术版）》 CAS 2017年第1期13-19,共7页

为了从复杂的生物测序数据中提取遗传病的发病机理,本文提出了基于位点基因型互作网络的遗传病病理提取方法,并建立位点基因型互作网络。为验证该方法的有效性,以人类原发性视网膜色素变性病例及对照组的基因测序数据为例,建立病例组与... 为了从复杂的生物测序数据中提取遗传病的发病机理,本文提出了基于位点基因型互作网络的遗传病病理提取方法,并建立位点基因型互作网络。为验证该方法的有效性,以人类原发性视网膜色素变性病例及对照组的基因测序数据为例,建立病例组与对照组的位点基因型互作网络。同时,对这两个网络的节点数量及拓扑性质进行差异性分析,并根据提取开关连接与保守连接的算法,分析比较RP1L1与KIF7开关。分析结果表明,开关RP1L1与KIF7跟人类视网膜色素变性存在较强相关。该研究对提取人类视网膜色素变性疾病的发病机理具有现实的生物学意义。 展开更多

关键词 人类原发性视网膜色素变性 位点基因型互作网络 差异网络

在线阅读 下载PDF 职称材料

基于PLC和组态的智能电动拧紧系统 被引量：5

10

作者 顾家友 高雪霞 杜芝 《凿岩机械气动工具》 2017年第2期25-27,34,共4页

基于PLC和组态的智能电动拧紧系统主要由一套西门子的PLC单元和基于亚控组态王编写的上位机软件及外围器件组成,能够完成高质量和高效率的螺栓拧紧。该系统应用范围广,角向的拧紧头结构能够满足狭小空间螺栓的拧紧,多轴的拧紧系统能提... 基于PLC和组态的智能电动拧紧系统主要由一套西门子的PLC单元和基于亚控组态王编写的上位机软件及外围器件组成,能够完成高质量和高效率的螺栓拧紧。该系统应用范围广,角向的拧紧头结构能够满足狭小空间螺栓的拧紧,多轴的拧紧系统能提高工作效率;能够同时控制扭矩和转角两个量,使得拧紧更加精准。智能电动拧紧系统有控制系统稳定,安全性能高,操作简便易行,读数方便直观等特点,有较好的商业前景。 展开更多

关键词 PLC 组态 电动拧紧系统

在线阅读 下载PDF 职称材料

基于CNN集成的面部表情识别 被引量：4

11

作者 陆嘉慧 张树美 赵俊莉 《青岛大学学报（工程技术版）》 CAS 2020年第2期24-29,42,共7页

针对面部表情识别在许多领域的重要应用,本文提出了一种基于卷积神经网络(convolutional neural network,CNN)集成的面部表情识别(facial expression recognition,FER)方法。采用3种网络结构不同的卷积神经网络进行训练,利用这些深层模... 针对面部表情识别在许多领域的重要应用,本文提出了一种基于卷积神经网络(convolutional neural network,CNN)集成的面部表情识别(facial expression recognition,FER)方法。采用3种网络结构不同的卷积神经网络进行训练,利用这些深层模型,使用基于验证准确性的多数投票、简单平均和加权平均的集合方法,在CK+数据集和FER-2013数据集上分别测试单一网络模型和集合网络模型。测试结果表明,单一模型的最佳识别率分别为98.99%和66.45%,集合网络的最佳识别率分别达到99.33%和67.98%,说明使用集合方法的模型比单一模型表现更佳,其中加权平均的集合方法优于简单平均和多数投票,说明本文所提出的方法能够满足面部表情识别的要求。该研究具有一定的实际应用价值。 展开更多

关键词 表情识别 卷积神经网络 网络集合 表情数据集

在线阅读 下载PDF 职称材料

基于全卷积神经网络复杂场景的车辆分割研究 被引量：3

12

作者 张乐 张志梅 +1 位作者 刘堃 王国栋 《青岛大学学报（工程技术版）》 CAS 2019年第2期13-20,共8页

针对目前存在的复杂交通场景中车辆分割精度不足的问题,本文提出了一种基于全卷积神经网络对图像中车辆进行分割的方法。在VGG16Net基础上,将全连接层改为卷积层,为获得更精细的边缘分类结果,减少了部分卷积层,并融合浅层和深层特征,同... 针对目前存在的复杂交通场景中车辆分割精度不足的问题,本文提出了一种基于全卷积神经网络对图像中车辆进行分割的方法。在VGG16Net基础上,将全连接层改为卷积层,为获得更精细的边缘分类结果,减少了部分卷积层,并融合浅层和深层特征,同时,为提高交通环境下车辆的分割精度,减少其他类别目标的干扰,将对车辆目标的分割问题改为基于像素的二分类问题,为提高网络的训练速度,采用Adam优化算法对网络进行训练。实验结果表明,与现有的全卷积神经网络分割效果相比,该网络对复杂交通场景下的车辆分割精度明显提高。该研究在智能交通方面具有较好的应用前景。 展开更多

关键词 全卷积神经网络 车辆分割 Adam优化算法 深度学习

在线阅读 下载PDF 职称材料

一种安全的量化选股策略——来自A股市场的实证 被引量：2

13

作者 孟叶 于忠清 周强 《金融理论与实践》 北大核心 2018年第8期102-107,共6页

以我国A股市场作为选股池,将传统股票分析方法——技术分析和基本面分析相结合,利用股票技术指标KDJ(随机指标)作为选股与择时的判断依据,将数据挖掘中Affinity Propagation(近邻传播聚类)与集成学习算法Adaboost相结合构建基本面数据... 以我国A股市场作为选股池,将传统股票分析方法——技术分析和基本面分析相结合,利用股票技术指标KDJ(随机指标)作为选股与择时的判断依据,将数据挖掘中Affinity Propagation(近邻传播聚类)与集成学习算法Adaboost相结合构建基本面数据分类器,迭代筛选出具有上涨潜力的股票投资组合制定选股策略。该策略在2015年至2017年进行模拟交易回测,结果表明该策略年化收益跑赢大盘指数,选股成功率较高,为量化选股提供新思路。 展开更多

关键词 证券市场 选股策略 大数据分析 技术指标 量化选股

在线阅读 下载PDF 职称材料

多关系网络上的社区发现 被引量：3

14

作者 李丛正 梁垒 周强 《现代电子技术》 2021年第1期19-24,共6页

真实的网络结构上的节点之间通常存在多种类型的边,依据网络上的各种边对网络进行社区划分是一项重要工作。为提高多关系网络上社区发现的准确度,提出一种基于机器学习的多关系网络社区发现算法。定义了在多关系网络上计算不同类型的边... 真实的网络结构上的节点之间通常存在多种类型的边,依据网络上的各种边对网络进行社区划分是一项重要工作。为提高多关系网络上社区发现的准确度,提出一种基于机器学习的多关系网络社区发现算法。定义了在多关系网络上计算不同类型的边在社区划分时所占的权重的方法,设计了在多关系网络上采集训练数据的方法,用采集到的数据训练节点表示模型就可以得到网络中节点的向量表示,在节点的向量表示上使用聚类算法进行社区划分。算法在考虑不同类型边之间的差异的前提下直接在多关系网络上实现社区发现。实验结果显示,该算法在单关系网络和多关系网络上优于近几年的一些算法。 展开更多

关键词 多关系网络 社区发现 机器学习 聚类 向量表示 异构网络

在线阅读 下载PDF 职称材料

词袋模型在高分遥感影像地物分类中的应用研究 被引量：2

15

作者 王小芹 张志梅 +2 位作者 邵烨 王常颖 张小峰 《现代电子技术》 北大核心 2020年第17期56-59,共4页

高分辨率遥感影像空间信息丰富,同时也给地物分类带来挑战。故提出一种基于词袋模型的地物分类方法,通过实验讨论词袋模型在这一问题中的适用性。首先在多尺度影像下随机选取场景,通过场景的底层特征聚类建立多尺度视觉词典;然后用视觉... 高分辨率遥感影像空间信息丰富,同时也给地物分类带来挑战。故提出一种基于词袋模型的地物分类方法,通过实验讨论词袋模型在这一问题中的适用性。首先在多尺度影像下随机选取场景,通过场景的底层特征聚类建立多尺度视觉词典;然后用视觉单词表达少量标记样本来训练支持向量机;最后用分类器提取典型地物。结果表明,在多尺度词袋模型表达下,研究区分类总体精度达到92.18%,Kappa系数为0.880 9。对比实验结果表明,词袋模型和多尺度词袋模型可以有效表达语义特征,从而在少量标记样本下提高分类精度。 展开更多

关键词 高分遥感影像 词袋模型 地物分类 视觉词典 地物特征提取 样本表达

在线阅读 下载PDF 职称材料

基于集成学习的股票指数预测方法 被引量：1

16

作者 孟叶 于忠清 周强 《现代电子技术》 北大核心 2019年第19期115-118,共4页

股票价格指数是衡量整个股票市场当前行情的重要指标,通常对指数内所有个股的涨跌幅进行加权平均得到,因此股票指数能够及时准确地反映当前市场的动向走势。对沪深300指数的历史行情数据进行建模,通过挖掘大盘指数的涨跌幅与个股的涨跌... 股票价格指数是衡量整个股票市场当前行情的重要指标,通常对指数内所有个股的涨跌幅进行加权平均得到,因此股票指数能够及时准确地反映当前市场的动向走势。对沪深300指数的历史行情数据进行建模,通过挖掘大盘指数的涨跌幅与个股的涨跌比之间的关系,利用聚类算法确定对市场影响较大的指数涨跌幅集合G,将其作为研究关键。运用集成学习的算法思想,选取K-近邻、梯度提升和自适应提升这3个分类器,通过改进的投票算法聚合成一个新的分类器模型,对指数行情数据进行学习分类,从而对G的出现进行预测,改进的投票算法综合考虑了弱分类器本身的分类效果,分类效果得到提升。实验结果表明,与原模型相比,新聚合的模型在一定程度上提升了股指预测的准确度,对于沪深300股指的预测具有指导作用。 展开更多

关键词 股指预测 集成学习 模型聚合 机器学习 分类器 指数行情

在线阅读 下载PDF 职称材料

基于基因表达编程的α-葡萄糖苷酶抑制剂定量构效关系研究 被引量：1

17

作者 张文丰 赵月 +3 位作者 董岳 李宗盛 马越 毕德顺 《科学技术创新》 2021年第20期39-41,共3页

利用由遗传算法和遗传规划扩展而来的基因表达式编程(GEP),建立了31个3-[4-(苯磺胺基)苯甲酰基]-2H-1-苯并吡喃-2-酮衍生物的定量构效关系模型。QSAR模型通过描述符预测α-葡萄糖苷酶ic50值。这些描述符在CODESSA软件中计算,并基于启发... 利用由遗传算法和遗传规划扩展而来的基因表达式编程(GEP),建立了31个3-[4-(苯磺胺基)苯甲酰基]-2H-1-苯并吡喃-2-酮衍生物的定量构效关系模型。QSAR模型通过描述符预测α-葡萄糖苷酶ic50值。这些描述符在CODESSA软件中计算,并基于启发式方法从描述符库中选择。选择6个描述符建立线性回归模型和非线性回归模型。线性回归和非线性回归结果的比较表明,GEP方法的QSAR建模优于多元线性回归。 展开更多

关键词 3-[4-(苯磺胺基)苯甲酰基]-2H-1-苯并吡喃-2-酮 Α-葡萄糖苷酶 定量结构活性关系 启发式算法 基因表达式编程

在线阅读 下载PDF 职称材料

一种改进的最邻近分类算法 被引量：3

18

作者 鞠冬彬 赵宪佳 《信息通信》 2018年第12期5-7,共3页

K最邻近算法(K-nearest neighbor,KNN)是一种无参数、分类效果显著、简单的经典分类算法,但是实际的训练样本经常存在类与类之间分布不均的现象,造成实验结果的偏差。针对这个问题,进行基于密度改进KNN算法。实验结果表明,改进的分类算... K最邻近算法(K-nearest neighbor,KNN)是一种无参数、分类效果显著、简单的经典分类算法,但是实际的训练样本经常存在类与类之间分布不均的现象,造成实验结果的偏差。针对这个问题,进行基于密度改进KNN算法。实验结果表明,改进的分类算法在分类的准确率平均提高了3.3%,召回率平均提高1.6%,F1值均值提高2.4%。 展开更多

关键词 KNN最邻近算法 文本分类 余弦相似度 类间分布不均

在线阅读 下载PDF 职称材料

基于《流浪地球》的视效行业发展前景研究 被引量：2

19

作者 李丽 毛爱英 《现代电影技术》 2020年第6期42-45,41,共5页

随着《流浪地球》的火爆上映,观众对我国视效制作水准和视效行业的认识发生了巨大的改变,影片不但以超过46亿的票房居中国内地总票房第三的位置,其恢弘壮丽而又真实细腻的视效更是震撼了无数观众,中国视效行业未来的发展也随之成为了备... 随着《流浪地球》的火爆上映,观众对我国视效制作水准和视效行业的认识发生了巨大的改变,影片不但以超过46亿的票房居中国内地总票房第三的位置,其恢弘壮丽而又真实细腻的视效更是震撼了无数观众,中国视效行业未来的发展也随之成为了备受瞩目的话题.本文通过统计分析网络公开资源的方法研究目前国内视效行业发展状况及面临的人才短缺、软件受限和核心视效技术掌握不足等问题,在深入分析的基础上提出了关于视效人才培养以及丰富中国内涵的相关措施,并对5G时代视效行业的快速发展做出展望. 展开更多

关键词 视效行业发展 视效人才培养 《流浪地球》

在线阅读 下载PDF 职称材料

基于Hadoop的客服运维文本聚类算法研究

20

作者 王玮 严文涛 +5 位作者 苏琦 刘荫 于展鹏 殷齐林 赵宪佳 孙更新 《青岛大学学报（工程技术版）》 CAS 2018年第1期59-64,共6页

为快速准确地提取和挖掘信息系统运维服务过程中的关键咨询问题,本文利用分布式技术,基于Hadoop的客服运维文本聚类算法,对海量文本数据进行聚类研究。给出了基于Hadoop的运维数据分布式并行计算模型,并在Hadoop框架中对系统中所有运维... 为快速准确地提取和挖掘信息系统运维服务过程中的关键咨询问题,本文利用分布式技术,基于Hadoop的客服运维文本聚类算法,对海量文本数据进行聚类研究。给出了基于Hadoop的运维数据分布式并行计算模型,并在Hadoop框架中对系统中所有运维数据进行分析处理。同时,给出了分布式文本聚类算法,并以10万余条电力信息系统运维数据为数据源,对设计的分布式聚类算法和传统聚类算法进行分析对比。实验结果表明,本文设计的分布式聚类算法所需时间低于传统聚类算法,不仅解决了传统聚类算法在处理海量数据方面由于数据规模过大引起的速度慢、效率低的问题,而且还借助大数据中蕴含的价值和动力,提升了企业运维服务水平。该研究具有较高的实用价值和理论意义。 展开更多

关键词 聚类算法 数据挖掘 大数据分析 HADOOP 客服运维

在线阅读 下载PDF 职称材料