期刊文献+
共找到25,494篇文章
< 1 2 250 >
每页显示 20 50 100
Hadoop大数据技术应用分析 被引量:21
1
作者 石方夏 高屹 《现代电子技术》 2021年第19期153-157,共5页
Hadoop等一些大数据处理平台的出现在一定程度上为人们处理大数据提供了可能与方便,但也存在一些不足。文中利用个例应用和归纳总结相结合的方法,从底层应用入手对Hadoop的主要构件HDFS、MapReduce及其生态环境进行介绍,阐述了其运行机... Hadoop等一些大数据处理平台的出现在一定程度上为人们处理大数据提供了可能与方便,但也存在一些不足。文中利用个例应用和归纳总结相结合的方法,从底层应用入手对Hadoop的主要构件HDFS、MapReduce及其生态环境进行介绍,阐述了其运行机制及原理。对目前Hadoop的应用场景作了详细的论述,并对其在使用过程中存在的问题进行了总结,最后给出这些问题目前的研究状况及部分解决方案。后期的使用证明,该方案可在一定程度上解决使用Hadoop过程中所遇到的问题。 展开更多
关键词 hadoop大数据技术 应用分析 数据存储 数据处理 分布式文件系统 数据分析
在线阅读 下载PDF
基于Hadoop大数据技术的视频监控系统的设计 被引量:4
2
作者 谌江波 《科技创新与应用》 2017年第9期25-26,共2页
大数据时代,"信息爆炸"给传统的视频监控提出了巨大的挑战,随着科技的发展,采用以Hadoop大数据技术的视频监控系统可以克服传统视频监控所带来的问题,数据分析和数据挖掘的利用在不同领域改变着我们的生活。
关键词 hadoop 大数据 视频监控
在线阅读 下载PDF
基于数据挖掘技术的拖拉机发动机故障诊断 被引量:2
3
作者 匡伟祥 《农机化研究》 北大核心 2025年第2期244-248,共5页
拖拉机是农业生产的重要工具,发动机是其核心部件,如发动机出现故障,将会直接影响农业生产效率和产量。为此,提出了一种使用数据挖掘技术进行拖拉机发动机故障诊断的方法。利用了机器学习技术和统计学,首先针对拖拉机田间运行信号噪音... 拖拉机是农业生产的重要工具,发动机是其核心部件,如发动机出现故障,将会直接影响农业生产效率和产量。为此,提出了一种使用数据挖掘技术进行拖拉机发动机故障诊断的方法。利用了机器学习技术和统计学,首先针对拖拉机田间运行信号噪音较大的问题,引入小波阈值去噪的方法;其次,基于卷积神经网络模型,引入一种注意力机制,提高故障诊断准确率,并通过对拖拉机传感器数据进行分析,可以帮助诊断和预测发动机故障;最后,通过实验结果验证了算法的有效性。研究结果不仅可以提高故障的准确性和效率,还能够节约维修成本和提高机器的利用率,具有较高的应用价值。 展开更多
关键词 拖拉机 发动机故障诊断 数据挖掘技术 机器学习 特征选择
在线阅读 下载PDF
大数据技术在企业人力资源管理中的应用 被引量:1
4
作者 李思逸 程诗 《上海轻工业》 2025年第1期181-183,共3页
信息时代的到来,使得大数据技术在各行各业得到了广泛应用。企业经营关乎民生,因此也开始引入大数据应用技术了。文章通过对大数据技术在企业人力资源管理中的应用进行分析,期望能够推动企业提升管理效率,帮助企业优化人力资源配置。并... 信息时代的到来,使得大数据技术在各行各业得到了广泛应用。企业经营关乎民生,因此也开始引入大数据应用技术了。文章通过对大数据技术在企业人力资源管理中的应用进行分析,期望能够推动企业提升管理效率,帮助企业优化人力资源配置。并且通过分析企业现有人力资源管理模式所面临的问题,结合大数据技术的优势与特征,分析如何正确使用大数据技术,以实现人力资源管理的智能化、精细化,为企业的可持续发展提供助力。 展开更多
关键词 大数据技术 企业 人力资源管理
在线阅读 下载PDF
基于Hadoop的造纸产业大数据平台研究与实现
5
作者 郭静 宋东峰 《造纸科学与技术》 2025年第3期84-87,共4页
在制浆造纸产业的飞速发展与智能化转型升级进程中,大数据正发挥着越来越重要的作用。针对当前我国造纸产业存在的数据规模越来越大、设备个体间关联性越来越强、造纸企业设备体系结构越来越多样等特点,借助Hadoop搭建了一种针对造纸产... 在制浆造纸产业的飞速发展与智能化转型升级进程中,大数据正发挥着越来越重要的作用。针对当前我国造纸产业存在的数据规模越来越大、设备个体间关联性越来越强、造纸企业设备体系结构越来越多样等特点,借助Hadoop搭建了一种针对造纸产业的大数据平台。该平台包括源数据层、数据集成加工层、分布式数据存储、大数据分析层等,可以针对海量数据、多元性数据及复杂结构数据进行共享、联系和可视化分析,为造纸企业提供更好的智能化支持。 展开更多
关键词 人工智能 hadoop技术 大数据技术 造纸产业
在线阅读 下载PDF
基于Hadoop的市级气象数据存储研究
6
作者 程艳芳 栾彩霞 《山西电子技术》 2025年第1期113-115,共3页
大数据技术为市级气象部门的数据存储提供了新的解决方案,大数据技术的应用能够有效地解决气象部门面临的数据快速增长,数据查询统计效率下降等问题,基于此介绍了市级气象部门应用Hadoop技术存储自动气象观测站数据、雷达数据等各类气... 大数据技术为市级气象部门的数据存储提供了新的解决方案,大数据技术的应用能够有效地解决气象部门面临的数据快速增长,数据查询统计效率下降等问题,基于此介绍了市级气象部门应用Hadoop技术存储自动气象观测站数据、雷达数据等各类气象数据的方法,通过这种方法,提高了市级气象部门的数据存储能力和查询统计效率,为市级气象部门提供了可扩展的、廉价的数据存储方式。 展开更多
关键词 大数据 hadoop 气象数据
在线阅读 下载PDF
数据挖掘分析技术下飞轮储能自动控制策略研究
7
作者 陈翠琴 符传健 《储能科学与技术》 北大核心 2025年第4期1548-1550,共3页
飞轮储能技术作为一种高效、环保的能量储存方式,在电力系统调频、交通运输及工业生产等领域具有广泛应用前景。然而,其控制策略的优化对于实现高效储能至关重要。对此本文深入探讨了数据挖掘技术在飞轮储能自动控制策略中的应用,文章... 飞轮储能技术作为一种高效、环保的能量储存方式,在电力系统调频、交通运输及工业生产等领域具有广泛应用前景。然而,其控制策略的优化对于实现高效储能至关重要。对此本文深入探讨了数据挖掘技术在飞轮储能自动控制策略中的应用,文章首先概述了飞轮储能技术的研究进程,随后详细分析了数据挖掘下的飞轮储能自动控制技术,包括数据挖掘技术原理种类,以及实际控制流程,以期为后续相关研究提供借鉴与思路。 展开更多
关键词 数据挖掘 控制 技术原理
在线阅读 下载PDF
基于Hadoop技术的加速器大数据安全存储与高效分析系统设计 被引量:7
8
作者 赵子晨 杨锋 +3 位作者 郭玉辉 陈又新 李钊扬 刘海涛 《现代电子技术》 北大核心 2024年第8期9-17,共9页
为了解决当前加速器控制系统在数据管理方面所面临的海量数据安全存储和高效分析处理的问题,在现有的基础上引入了Hadoop大数据框架,并结合大数据其他相关组件,构建一个分布式数据仓库系统。文章详细阐述了数据仓库的搭建过程,包括软硬... 为了解决当前加速器控制系统在数据管理方面所面临的海量数据安全存储和高效分析处理的问题,在现有的基础上引入了Hadoop大数据框架,并结合大数据其他相关组件,构建一个分布式数据仓库系统。文章详细阐述了数据仓库的搭建过程,包括软硬件架构以及将数据从现有数据库抽取、转换和加载到数据仓库的方案。特别是针对系统归档数据的存储和分析需求,根据实际应用场景设计一个基于HBase的存储解决方案。在系统部署完成后,进行了吞吐量测试,并与当前使用的传统数据库进行性能对比。测试结果显示,基于Hadoop的数据仓库系统在海量数据存储、高性能查询以及数据分析处理方面都表现出明显的优势。这一改进为加速器控制系统提供了更强大的数据管理和处理能力,有望为加速器在未来的发展提供更多可能性。 展开更多
关键词 数据仓库 hadoop技术 加速器 大数据 安全存储 HBASE ETL
在线阅读 下载PDF
基于大数据技术的高校图书馆信息资源管理优化策略
9
作者 韩雨彤 《山东高等教育》 2025年第2期21-26,90,共7页
大数据技术的广泛应用给高校图书馆信息资源管理带来了新挑战,主要体现为“数据资源—技术工具—人员素质”的系统性错配。为解决这一问题,应构建以平台支撑为基础、资源重构为核心、安全管控为保障、人才培育为动力的多维协同机制。同... 大数据技术的广泛应用给高校图书馆信息资源管理带来了新挑战,主要体现为“数据资源—技术工具—人员素质”的系统性错配。为解决这一问题,应构建以平台支撑为基础、资源重构为核心、安全管控为保障、人才培育为动力的多维协同机制。同时通过分层技术架构实现数据全流程管理,依托动态数据分析驱动馆藏精准配置,建立加密防护与权限控制相结合的安全体系,完善分层培训与人才引育的素养提升路径,最终实现高校图书馆信息资源管理的不断优化。 展开更多
关键词 大数据技术 高校图书馆 信息资源管理 数据分析
在线阅读 下载PDF
Access数据库技术及其运用
10
作者 朱秋海 《消费电子》 2025年第6期200-202,共3页
随着科学技术的持续进步,信息技术行业逐渐进步与发展。在数字化背景下,为提升数据存储管理的效率,减少人工失误,Access数据库技术应用的重要性日益凸显,受到社会各界广泛关注,基于此,简单分析Access数据库技术理论基础及其应用方法,并... 随着科学技术的持续进步,信息技术行业逐渐进步与发展。在数字化背景下,为提升数据存储管理的效率,减少人工失误,Access数据库技术应用的重要性日益凸显,受到社会各界广泛关注,基于此,简单分析Access数据库技术理论基础及其应用方法,并深入探究基于Access数据库的实例应用,具体涉及系统结构、员工基本情况表的思考与设计等内容,以供业内人士参考。 展开更多
关键词 ACCESS 数据技术 应用
在线阅读 下载PDF
数据要素市场化对企业投资效率的影响研究——基于技术创新机制的实证分析
11
作者 谢磊 舒巧峰 《金融经济》 2025年第1期51-61,共11页
数字经济时代,数据要素已成为企业高质量投资的核心驱动力。本文以我国数据交易平台的兴起作为准自然实验背景,利用2011—2023年中国A股上市公司数据,应用渐进式双重差分法评估数据要素市场化对企业投资效率的影响及其作用机制。研究发... 数字经济时代,数据要素已成为企业高质量投资的核心驱动力。本文以我国数据交易平台的兴起作为准自然实验背景,利用2011—2023年中国A股上市公司数据,应用渐进式双重差分法评估数据要素市场化对企业投资效率的影响及其作用机制。研究发现,数据要素市场化能显著提升企业投资效率,展现投资优化与治理效能。进一步的机制检验表明,数据要素市场化通过激励企业加大技术创新投入,间接促进了投资效率的提升。异质性检验显示,高新技术企业、大规模企业、东部地区企业及国有企业在数据要素市场化进程中受益更为显著。本文深化了对企业投资效率影响因素的探讨,为政府推进数据要素市场化改革提供了有益参考。 展开更多
关键词 数字经济 数据要素市场化 数据交易平台 技术创新 企业投资效率
在线阅读 下载PDF
基于大数据的桥梁结构健康监测技术研究
12
作者 赵亮 《交通世界》 2025年第9期129-131,共3页
通过整合不同的监测数据,实现数据的集成与实时监控,提出了一种数据驱动的预测维护模型。该模型应用异常检测与故障诊断技术,并将可视化技术与决策支持系统融入桥梁健康监测方案。研究方法包括异常检测与故障诊断技术以及相关算法的应用... 通过整合不同的监测数据,实现数据的集成与实时监控,提出了一种数据驱动的预测维护模型。该模型应用异常检测与故障诊断技术,并将可视化技术与决策支持系统融入桥梁健康监测方案。研究方法包括异常检测与故障诊断技术以及相关算法的应用,以识别并预测潜在的结构缺陷。研究结果表明,大数据技术显著提高了桥梁健康监测的准确性与效率,有效预防结构问题,从而减少维护成本并延长桥梁使用寿命。 展开更多
关键词 大数据 桥梁结构 健康监测技术
在线阅读 下载PDF
基于LoRa技术的配电网真型试验场数据传输与分析系统
13
作者 余雯 《通讯世界》 2025年第2期16-18,共3页
探讨了基于远距离无线电(long range radio,LoRa)技术的配电网真型试验场数据传输与分析系统的设计。该系统架构采用传感层、网络层及应用层,通过单片机处理传感器数据,并通过LoRa网络传输至服务器。服务器端利用随机森林算法对数据进... 探讨了基于远距离无线电(long range radio,LoRa)技术的配电网真型试验场数据传输与分析系统的设计。该系统架构采用传感层、网络层及应用层,通过单片机处理传感器数据,并通过LoRa网络传输至服务器。服务器端利用随机森林算法对数据进行分类、预测和预警。实证测试表明,该系统在复杂电磁环境下能够稳定、可靠地传输监测数据,且数据分析功能有效,提高了配电网真型试验场的数智化管理水平。 展开更多
关键词 LoRa技术 配电网 数据传输 数智化管理
在线阅读 下载PDF
数字技术创新驱动企业数据资产增长的路径与机制
14
作者 张恩典 李湛 《中国流通经济》 北大核心 2025年第2期100-114,共15页
伴随数字化转型的持续深入,数字技术创新已成为驱动企业数据资产增长的关键驱动力。以数字技术驱动数据要素化、提升企业价值理论为基础,数字技术创新与主导业务深度融合,引导技术组织共同实现企业数字化价值。从数据要素化、资产化、... 伴随数字化转型的持续深入,数字技术创新已成为驱动企业数据资产增长的关键驱动力。以数字技术驱动数据要素化、提升企业价值理论为基础,数字技术创新与主导业务深度融合,引导技术组织共同实现企业数字化价值。从数据要素化、资产化、资本化三个阶段梳理企业数字技术创新提升企业价值的四条路径,即技术基础设施构建、业务流程全面在线化、数据治理和智能化决策体系建立。以2010—2022年沪深A股上市公司为样本,运用多元线性回归分析,验证数字技术创新对企业数据资产积累的正向作用。产业链协同效应在数字技术推动企业数据资产增长中起着关键作用。数字技术创新促进产业链协同,重新构建产业链整合机制,显著增强产业链的韧性,通过上下游企业间的合作与资源共享,推动产业链的整合与效率提升,进一步促进企业数据资产的增长。异质性分析表明,非国有企业由于灵活的创新激励和决策机制,在数字技术创新与转化效率上更具优势。此外,在数字基础设施较为完善的环境下,企业能够更充分发挥数字技术的潜力,显著提升数据资产价值。鉴于此,政府应加大对企业数字技术创新的支持力度,提供研发资助,推动产学研合作;优化数字基础设施建设,扩大网络覆盖范围,推进云计算和数据中心建设;推动产业链协同创新,设立奖励机制与协同创新平台;完善数据资产管理和评估体系,明确权利归属,确立评估标准,构建交易平台。 展开更多
关键词 数据资产 数据要素化 数字技术 企业数字化转型
在线阅读 下载PDF
大数据发展如何影响出口技术复杂度?——来自国家级大数据综合试验区的经验证据
15
作者 周家正 赵家章 《首都经济贸易大学学报》 北大核心 2025年第2期63-78,共16页
以2011—2020年286个地级市为研究样本,利用国家级大数据综合试验区建设进行准自然实验,构建多时点双重差分模型,实证分析试验区建设对出口技术复杂度的影响效果及其作用机制。研究结果显示,试验区建设有助于提升出口技术复杂度,且在东... 以2011—2020年286个地级市为研究样本,利用国家级大数据综合试验区建设进行准自然实验,构建多时点双重差分模型,实证分析试验区建设对出口技术复杂度的影响效果及其作用机制。研究结果显示,试验区建设有助于提升出口技术复杂度,且在东部和中部地区、大规模城市、非资源型城市以及欠发达地区更为明显。机制分析结果表明,促进创新研发、推动产业集聚以及优化制度环境是试验区建设促进出口技术复杂度提升的重要机制。拓展性分析结果表明,试验区对邻近城市出口技术复杂度存在负向空间溢出效应。 展开更多
关键词 大数据 国家级大数据综合试验区 出口技术复杂度 创新研发 产业集聚 制度环境
在线阅读 下载PDF
基于区块链与模糊聚类算法的区域大数据分析技术研究
16
作者 何颖 《现代电子技术》 北大核心 2025年第6期52-56,共5页
金融数据具备非线性、高维度的特点,同时对安全性有较高的要求。文中结合区块链技术和模糊聚类算法,提出一种面向区域互联网金融的异常数据分析模型,该模型由异常数据分析算法和隐私保护算法组成。异常数据分析算法针对模糊均值聚类算... 金融数据具备非线性、高维度的特点,同时对安全性有较高的要求。文中结合区块链技术和模糊聚类算法,提出一种面向区域互联网金融的异常数据分析模型,该模型由异常数据分析算法和隐私保护算法组成。异常数据分析算法针对模糊均值聚类算法处理高维非线性数据能力弱的缺点,使用深度信念网络进行改进,进而提升模型的数据处理能力。隐私保护使用差分隐私保护算法,在不利用背景知识的前提下完成数据的保护,同时保证了数据的可用性。在实验测试中,将所提模糊聚类算法与常用的主流K-Means算法、DPC算法进行了对比,结果表明:所提算法的性能在所有对比算法中最优;与此同时,加入隐私保护算法后对聚类结果的影响保持在0.021以内,充分证明了该算法性能的优越性。 展开更多
关键词 模糊聚类算法 区块链技术 异常数据识别 深度信念网络 差分隐私保护算法 区域数据分析
在线阅读 下载PDF
基于产业技术链和多源数据的企业技术研发方向识别研究
17
作者 李琳珊 魏超 +1 位作者 毛一雷 孙洁 《中国科技资源导刊》 2025年第1期44-54,共11页
高质量的技术研发工作是提升企业竞争力的关键驱动力。为使企业能够有效识别技术研发方向,在科技创新过程中抢占科技竞争高地与未来发展制高点,设计企业技术研发方向识别方法研究框架。首先,从产业技术链视角出发,基于网络信息和论文数... 高质量的技术研发工作是提升企业竞争力的关键驱动力。为使企业能够有效识别技术研发方向,在科技创新过程中抢占科技竞争高地与未来发展制高点,设计企业技术研发方向识别方法研究框架。首先,从产业技术链视角出发,基于网络信息和论文数据利用LDA主题模型提取产业技术主题明确当前产业技术需求;其次,围绕这个需求,并结合专利数据信息,通过技术主题—技术功效—时间三维模型对企业技术研发方向进行识别;最后,以动力电池领域一目标企业为分析对象,对其进行技术研发方向识别研究以验证识别方法的可行性,为企业的科学决策和有效进行技术布局提供参考。 展开更多
关键词 技术研发方向 多源数据 产业技术 动力电池
在线阅读 下载PDF
基于大数据技术的无线通信网络异常入侵行为检测方法
18
作者 黄鹏宇 鞠亚军 成礼勇 《长江信息通信》 2025年第1期185-187,共3页
针对通信网络异常入侵检测,传统方法难以准确反映网络状态。设计了基于大数据技术的检测方法,全局提取异常入侵特征,避免检测失误。该方法通过安全数据采集、预处理、分析、存储和可视化,确保检测准确性。设置异常节点权值小,正常节点... 针对通信网络异常入侵检测,传统方法难以准确反映网络状态。设计了基于大数据技术的检测方法,全局提取异常入侵特征,避免检测失误。该方法通过安全数据采集、预处理、分析、存储和可视化,确保检测准确性。设置异常节点权值小,正常节点权值大,满足检测需求。实验证明,该方法检测准确性高,适用于实际应用。 展开更多
关键词 大数据技术 无线通信 通信网络 异常入侵 入侵行为 检测方法
在线阅读 下载PDF
大数据环境下信息通信数据的加密技术研究 被引量:1
19
作者 卯升团 《长江信息通信》 2025年第1期168-170,共3页
在我国科技高速发展的过程中,大量信息被应用在各个行业,在数据量急剧增长的背景下,传统的加密技术面临着巨大挑战,在数据传输过程中可能由于多种因素导致数据信息的泄露,因此加强数据安全与保护就显得尤为重要。基于此,文章首先对信息... 在我国科技高速发展的过程中,大量信息被应用在各个行业,在数据量急剧增长的背景下,传统的加密技术面临着巨大挑战,在数据传输过程中可能由于多种因素导致数据信息的泄露,因此加强数据安全与保护就显得尤为重要。基于此,文章首先对信息通信数据加密进行了简要分析,之后阐述了当前常见的数据加密技术,最后分析了企业运行过程中数据加密技术的实际应用。 展开更多
关键词 大数据 信息通信数据 加密技术
在线阅读 下载PDF
大数据Hadoop集群下Sqoop数据传输技术研究 被引量:2
20
作者 周少珂 郭璇 +1 位作者 张振平 付媛冰 《河南科技》 2024年第6期25-28,共4页
【目的】Hadoop系统是大数据分布式集群系统,其开源的生态圈中有众多功能组件,通过在大数据Hadoop集群系统上部署Sqoop组件,将本地关系型Mysql数据库中的数据和Hive数据仓库中存储的数据进行快速导入导出,进一步研究数据传输性能。【方... 【目的】Hadoop系统是大数据分布式集群系统,其开源的生态圈中有众多功能组件,通过在大数据Hadoop集群系统上部署Sqoop组件,将本地关系型Mysql数据库中的数据和Hive数据仓库中存储的数据进行快速导入导出,进一步研究数据传输性能。【方法】首先在企业服务器上部署配置Hadoop分布式集群系统,其次在该集群上部署Sqoop组件并测试与Mysql数据库和Hive数据仓库的连通性,最后使用Sqoop技术测试本地Mysql数据库和Hive数据仓库之间的导入和导出。【结果】通过Sqoop技术能够更加便捷快速地从本地Mysql数据库上传到Hadoop集群系统,与传统方式下先将本地Mysql数据库中数据导出TXT文档格式后再使用Hive数据仓库的Load数据批量加载功能相比,在时间和效率方面大为提升。【结论】验证了Sqoop组件在Hadoop集群中部署运行的正确性,为大数据技术学习者提供一定程度的参考借鉴。 展开更多
关键词 大数据 hadoop 分布式集群 Sqoop
在线阅读 下载PDF
上一页 1 2 250 下一页 到第
使用帮助 返回顶部