期刊文献+
共找到79篇文章
< 1 2 4 >
每页显示 20 50 100
人工神经网络BP算法密集型数据的预处理 被引量:15
1
作者 梁艳春 王在申 《吉林大学自然科学学报》 CAS CSCD 1995年第3期19-22,共4页
针对误差反向传播算法密集型数据输入问题,提出一种数据预处理方法。模拟实验表明,采用这种预处理技术可以极大地改善密集型数据输入时网络的学习效率。
关键词 神经网络 密集型数据 数据预处理 BP算法
在线阅读 下载PDF
面向数据密集型应用的近数据处理架构设计 被引量:1
2
作者 谢洋 李晨 陈小文 《计算机工程与科学》 北大核心 2025年第5期797-810,共14页
大数据时代,多核处理器在处理数据密集型应用时,面临着数据局部性低、访存延迟高和内核计算效率低等挑战。近数据处理对于降低访存延迟、提高内核计算效率具有重要潜力。设计了一种计算访存松耦合的近数据处理架构(LcNDP),部署在多核处... 大数据时代,多核处理器在处理数据密集型应用时,面临着数据局部性低、访存延迟高和内核计算效率低等挑战。近数据处理对于降低访存延迟、提高内核计算效率具有重要潜力。设计了一种计算访存松耦合的近数据处理架构(LcNDP),部署在多核处理器的共享缓存端和内存端。一方面通过迁移内核的访存任务,实现内核计算与访存的并行,隐藏访存开销;另一方面通过近数据计算单元,处理流数据计算,降低内核计算量和访存开销。实验结果表明LcNDP相较于传统多核架构,平均延迟降低了43%,与传统近数据处理的多核架构相比平均延迟降低了23%。 展开更多
关键词 数据 数据密集型应用 计算机体系结构 多核处理器
在线阅读 下载PDF
数据密集型大学的兴起及其治理机制
3
作者 王占军 李县慧 《江苏高教》 北大核心 2025年第6期11-19,共9页
数字时代数据密集型科学兴起,大学已然成为数据密集型大学,高质量的数据治理也成为大学发展的关键因素。目前,“基础知识—开放”与“应用知识—封闭”两个范畴在很大程度上定义了大学的制度特征,但是传统的基于基础知识的开放治理框架... 数字时代数据密集型科学兴起,大学已然成为数据密集型大学,高质量的数据治理也成为大学发展的关键因素。目前,“基础知识—开放”与“应用知识—封闭”两个范畴在很大程度上定义了大学的制度特征,但是传统的基于基础知识的开放治理框架和基于应用知识的封闭治理框架已经出现效用不足的情况,沿用传统的知识治理模式会给大学治理带来潜在风险。由此,基于数据中心化知识生产模式,数据密集型大学对数据治理模式作出了初步探讨,但仍存在制度供给不足问题,需要通过结构机制的制度化、程序机制的标准化、关系机制的生态化,构建“数据驱动—流程再造—协同共治”的新型治理模式。 展开更多
关键词 数据 数据治理 数据密集型大学 数据密集型科学
在线阅读 下载PDF
共同富裕下数据密集型企业价值共创机制研究综述与展望 被引量:1
4
作者 王文平 赵荧梅 《东南大学学报(哲学社会科学版)》 CSSCI 北大核心 2024年第2期62-71,147,共11页
共同富裕是社会主义的本质要求和中国式现代化的重要特征,数字经济为推动共同富裕提供包容性发展的新引擎。不断突破的互联网与数字化技术,使数据成为财富创造的关键生产要素,如何发挥数据密集型企业数据要素的连接、融合及赋能效应,化... 共同富裕是社会主义的本质要求和中国式现代化的重要特征,数字经济为推动共同富裕提供包容性发展的新引擎。不断突破的互联网与数字化技术,使数据成为财富创造的关键生产要素,如何发挥数据密集型企业数据要素的连接、融合及赋能效应,化解其经济、社会功能间的冲突,实现员工、客户及合作伙伴等利益相关者间的经济价值与社会价值协同共创,成为共同富裕使命任务下的重大社会需求。为此,针对共同富裕下数据密集型企业价值共创机制构建问题,通过梳理国内外相关文献,从社会经济学、价值理论等多学科领域,系统综述现有相关研究,提出以人本逻辑取代资本逻辑、驱动共同富裕使命任务导入及经济、社会价值协同创造等当前迫切需要探索的前沿学术问题。 展开更多
关键词 共同富裕 数据密集型企业 价值共创
在线阅读 下载PDF
资源失配时低代价的数据与计算密集型服务重配
5
作者 周长兵 李小翠 +1 位作者 王煜炜 王亚沙 《计算机学报》 EI CAS CSCD 北大核心 2024年第9期2035-2058,共24页
随着边缘计算的广泛应用,近年来在网络边缘侧激增了一些延迟敏感的用户请求,这些应用对边缘网络中物联网设备提供的资源提出了较高的服务质量(Quality of Service,QoS)需求,例如严格的地理空间约束、时延/能量及其他资源约束.物联网设... 随着边缘计算的广泛应用,近年来在网络边缘侧激增了一些延迟敏感的用户请求,这些应用对边缘网络中物联网设备提供的资源提出了较高的服务质量(Quality of Service,QoS)需求,例如严格的地理空间约束、时延/能量及其他资源约束.物联网设备提供的功能通常被封装为运行在边缘节点上的服务,用户请求可以通过组合数据和/或计算密集型的物联网服务来实现.考虑到物联网设备的资源稀缺性以及用户请求的在线持续部署和潜在长期执行特征,边缘服务运行期间对物联网设备资源的占用和释放导致边缘网络中资源动态变化.由于物联网设备的资源通常难以得到有效补充,且消耗差异可能较大,有些设备可能会过载,导致在当前时间点适配的物联网服务,在随后时间点可能难以适配用户请求,并导致QoS降级.针对边缘网络高负载时新请求持续部署导致特定强约束难以满足的挑战,本文开展资源失配时低代价的服务重配研究,提出了一种资源高效的服务重配方法,旨在通过服务迁移技术重调度物联网设备所提供的服务,以满足更多具有一定QoS约束的用户请求.基于上海电信基站数据集进行了大量实验,实例验证本文方法的有效性.实验结果表明,本文所提方法在满足用户服务请求时延约束、降低物联网设备能量消耗、提高边缘网络资源利用效益等方面表现均优于对比技术. 展开更多
关键词 数据与计算密集型服务 资源利用效益 服务重配 服务迁移 边缘网络
在线阅读 下载PDF
数据密集型科学与工程:需求和挑战 被引量:80
6
作者 宫学庆 金澈清 +2 位作者 王晓玲 张蓉 周傲英 《计算机学报》 EI CSCD 北大核心 2012年第8期1563-1578,共16页
科学研究在经历了实验科学、理论科学、计算科学阶段后,进入了数据密集型科学阶段,与之相伴的是大数据时代的到来.大数据泛指规模达到几百TB,甚至PB级的数据①,其典型的特征是分布、异构、低质量等.尽管传统数据库管理技术(特别是商业... 科学研究在经历了实验科学、理论科学、计算科学阶段后,进入了数据密集型科学阶段,与之相伴的是大数据时代的到来.大数据泛指规模达到几百TB,甚至PB级的数据①,其典型的特征是分布、异构、低质量等.尽管传统数据库管理技术(特别是商业关系型数据库)在过去40年间取得了巨大成功,但是这些技术和系统无法有效管理支持数据密集型科学与工程(Data-Intensive Science and Engineering,DISE)的大数据.文中探讨数据密集型科学与工程的具体需求和现实挑战.它涵盖的内容表现在4个层面,包括数据存储与组织、计算方法、数据分析以及用户接口技术等.同时,数据质量、数据安全、数据监护等内容也需要在各层面得到重视.文中尝试梳理了数据密集型科学与工程的整体架构,回顾了相关领域的新近发展,分析了面临的挑战,探讨了未来的研究方向. 展开更多
关键词 数据 数据密集型科学与工程 需求 挑战
在线阅读 下载PDF
数据密集型计算编程模型研究进展 被引量:39
7
作者 王鹏 孟丹 +1 位作者 詹剑锋 涂碧波 《计算机研究与发展》 EI CSCD 北大核心 2010年第11期1993-2002,共10页
作为一种新兴的计算模式,云计算受到了学术界和产业界的广泛关注.云计算以互联网服务和应用为中心,服务提供者需要存储和分析海量数据.为了能够低成本高效率地处理Web量级数据,主要的互联网公司都在由商品化服务器组成的大规模集群系统... 作为一种新兴的计算模式,云计算受到了学术界和产业界的广泛关注.云计算以互联网服务和应用为中心,服务提供者需要存储和分析海量数据.为了能够低成本高效率地处理Web量级数据,主要的互联网公司都在由商品化服务器组成的大规模集群系统上研发了分布式编程系统.编程模型可以降低开发人员在大规模集群上编程的难度,并让程序充分利用集群资源,但设计这样的编程模型面临巨大挑战.首先说明了数据密集型计算的特点,并指出了编程模型要解决的基本问题;接着深入介绍了国际上代表性的编程模型,并对这些编程模型的特点进行了比较和分析;最后对当前所面临的问题和今后的发展趋势进行了总结和展望. 展开更多
关键词 云计算 数据密集型计算 编程模型 数据并行 海量数据处理 MAPREDUCE
在线阅读 下载PDF
数据密集型应用中的异构数据集成服务研究 被引量:6
8
作者 葛敬军 孔繁之 +2 位作者 张明 滕剑锋 刘歆 《计算机工程》 CAS CSCD 北大核心 2015年第7期60-65,共6页
从分布式异构数据集成和海量数据共享两方面对领域异构数据集成的关键技术进行研究,提出面向领域异构数据的语义集成方法,建立针对各种异构数据的嵌套对象模型,通过虚拟视图和Mashup服务架构对数据及数据之间的关系进行描述、组织和展示... 从分布式异构数据集成和海量数据共享两方面对领域异构数据集成的关键技术进行研究,提出面向领域异构数据的语义集成方法,建立针对各种异构数据的嵌套对象模型,通过虚拟视图和Mashup服务架构对数据及数据之间的关系进行描述、组织和展示,利用语义映射实现数据交互并保持数据同步,从而提供动态的数据集成服务。实例分析结果表明,基于该数据集成方法开发的油气井生产优化决策与诊断平台能实现多种专业数据集成及跨专业应用,为油气井生产动态监控、优化设计、诊断决策等提供技术支持。 展开更多
关键词 语义异构 嵌套对象模型 虚拟视图 数据集成 数据密集型应用
在线阅读 下载PDF
大规模数据密集型系统中的去重查询优化 被引量:6
9
作者 宋怀明 安明远 +2 位作者 王洋 袁春阳 孙凝晖 《计算机研究与发展》 EI CSCD 北大核心 2010年第4期581-588,共8页
针对shared-nothing结构下大规模数据密集型系统去重查询的挑战,提出了一种有效的数据分布策略和并行处理方法分别对相关属性和无关属性去重进行优化:即自适应的散列和直方图相结合的数据分布策略,以及异步式并行查询中间件.前者在数据... 针对shared-nothing结构下大规模数据密集型系统去重查询的挑战,提出了一种有效的数据分布策略和并行处理方法分别对相关属性和无关属性去重进行优化:即自适应的散列和直方图相结合的数据分布策略,以及异步式并行查询中间件.前者在数据写入时保证数据均衡,并在数据量发生倾斜时自动调整数据的分布;后者充分发掘了去重查询处理中的粗粒度流水级并行,并消除了多节点同步等待的开销,尽早地返回结果.在生产系统DBroker上的测试表明,数据分布策略极大地改善相关属性的去重查询性能,而异步式并行查询引擎能够充分发掘并行性,对不相关属性的去重查询具有显著的性能提升. 展开更多
关键词 去重查询 数据划分 大规模数据密集型系统 异步查询 并行查询引擎
在线阅读 下载PDF
一个面向数据密集型网格的通信模型 被引量:6
10
作者 陈庆奎 那丽春 《北京航空航天大学学报》 EI CAS CSCD 北大核心 2004年第11期1071-1075,共5页
在由多计算机集群构成的数据密集型网格环境下 ,为了解决通信峰值阶段的通信冲突问题 ,提出了一个多级分组通信模型MGCM(Multi levelGroupingCommunicationModel) ) .给出了由多机群组成的数据密集型网格数据节点DGDN(Data intensiveGri... 在由多计算机集群构成的数据密集型网格环境下 ,为了解决通信峰值阶段的通信冲突问题 ,提出了一个多级分组通信模型MGCM(Multi levelGroupingCommunicationModel) ) .给出了由多机群组成的数据密集型网格数据节点DGDN(Data intensiveGridDataNode)和完全图通信等形式化定义 .利用主动队列、被动队列机制 ,研究了单个机群内的分组通信算法GCA(GroupingCommunicationAlgorithm)以及双机群内的计算机之间的完全图通信问题GCAD(GroupingCommunicationAlgorithminDou blecomputerclusters) .基于网络距离机制、GCA和GCAD ,设计了DGDN上的多级分组通信模型 .理论分析和实践表明 ,该模型有效地解决了数据密集型网格环境下通信峰值所造成的并行计算效率低下的问题 .该模型适合于基于网格的数据密集型并行计算 . 展开更多
关键词 数据密集型网格 多级分组通信 冲突 完全图通信
在线阅读 下载PDF
数据密集型科学环境下的情报服务与发展 被引量:10
11
作者 刘艳红 罗健 《图书与情报》 CSSCI 北大核心 2013年第6期105-108,共4页
数据密集型科学环境的兴起与发展,使得情报服务的内容与方式发生了变化,基于科学数据的保存、发现、分析等服务成为了信息服务机构的服务增长点。文章对科学研究的第四范式、数据密集型科学环境的形成与推动因素进行了概述,重点对数据... 数据密集型科学环境的兴起与发展,使得情报服务的内容与方式发生了变化,基于科学数据的保存、发现、分析等服务成为了信息服务机构的服务增长点。文章对科学研究的第四范式、数据密集型科学环境的形成与推动因素进行了概述,重点对数据密集型科学环境下的情报服务内容与发展途径进行了分析。 展开更多
关键词 数据密集型科学环境 第四范式 情报服务 科学数据
在线阅读 下载PDF
数据密集型知识发现的边界与陷阱——以美国大选预测为例 被引量:15
12
作者 罗俊 罗教讲 《学术论坛》 CSSCI 北大核心 2017年第3期1-7,共7页
信息时代数据快速增长,数据密集型知识发现成为科学研究的新途径。它在取得一系列成就的同时,也出现了走向"唯数据论"的极端倾向。数据生成、采集的方式和特点,数据分析处理技术的水平,决定了数据密集型知识发现存在能力边界... 信息时代数据快速增长,数据密集型知识发现成为科学研究的新途径。它在取得一系列成就的同时,也出现了走向"唯数据论"的极端倾向。数据生成、采集的方式和特点,数据分析处理技术的水平,决定了数据密集型知识发现存在能力边界。对于科学研究尤其是社会科学研究而言,数据的代表性、数据的质量、算法的模糊性等是必须认真考量的问题。数据密集型知识发现的产生,并不意味着"理论的终结"和传统科学方法都已过时,而是在新的基础上使实验、理论、模拟与数据统一起来成为可能,这一发展方向具有更为广阔的前景。 展开更多
关键词 数据密集型知识 数据驱动 数据代表性 数据质量 数据 计算社会科学
在线阅读 下载PDF
一种适应数据与计算密集型任务的私有云系统实现研究 被引量:18
13
作者 杨志豪 赵太银 +1 位作者 姚兴苗 李磊 《计算机应用研究》 CSCD 北大核心 2011年第2期621-624,共4页
与公有云计算相比,针对数据与计算双重密集型任务的私有云计算系统对计算效率和系统管理效率提出了更高的要求,目前的公有云计算系统显得过于复杂和繁琐,因此需要一种简便易用的能够适应数据与计算密集型任务的私有云计算系统实现。借... 与公有云计算相比,针对数据与计算双重密集型任务的私有云计算系统对计算效率和系统管理效率提出了更高的要求,目前的公有云计算系统显得过于复杂和繁琐,因此需要一种简便易用的能够适应数据与计算密集型任务的私有云计算系统实现。借鉴公有云计算的相关理论和实现方法,提出了一种针对数据与计算双重密集型任务的私有云计算系统实现方案。该方案通过作业文件描述用户的计算任务,确定计算任务的计算模型和计算的输入输出文件;针对私有云的特点,简化Google云计算系统的MapReduce并行处理框架,得到更加直观的数据计算模型;自动连接计算数据流,使该方案更加精简和适应处理数据与计算双重密集型任务。实验结果表明:该方案能够减少额外的计算消耗,处理速度能得到显著提升,有很高的实用性。 展开更多
关键词 数据与计算双重密集型任务 私有云 云计算 并行计算
在线阅读 下载PDF
多学科视域下教育密集型研究的机遇与挑战——基于美国《数据密集型教育研究》的解读 被引量:6
14
作者 张婧婧 封晨 《复旦教育论坛》 CSSCI 北大核心 2017年第5期99-105,共7页
数据科学(data science)的兴起给教育研究带来了新的机遇与挑战。在美国国家科学基金会的资助下,计算研究协会(CRA)牵头组建了两个工作小组,对如何在教育领域开展数据密集型研究进行了调研,并于2015年10月发布了题为《数据密集型教育研... 数据科学(data science)的兴起给教育研究带来了新的机遇与挑战。在美国国家科学基金会的资助下,计算研究协会(CRA)牵头组建了两个工作小组,对如何在教育领域开展数据密集型研究进行了调研,并于2015年10月发布了题为《数据密集型教育研究》的报告书。本文提炼报告中不同科学领域的密集型研究对教育密集型研究的启示,进行结构性的呈现和解读。在多学科视域下,讨论教育密集型研究面临的机遇与挑战,并提出一系列可供参考的发展策略。 展开更多
关键词 数据密集型研究 数据科学 数据 第四种范式
在线阅读 下载PDF
云环境下面向负载均衡的数据密集型工作流的数据约简策略 被引量:5
15
作者 胡志刚 李佳 郑美光 《计算机应用研究》 CSCD 北大核心 2019年第8期2410-2414,2420,共6页
如何对数据密集型工作流应用进行高效合理地调度成为云计算领域亟待解决的关键问题之一。针对此问题,构造数据密集型工作流的有向超图模型,提出了数据支持能力概念,通过基于数据支持能力的合并操作对模型进行约简。最后优化超图多层剖... 如何对数据密集型工作流应用进行高效合理地调度成为云计算领域亟待解决的关键问题之一。针对此问题,构造数据密集型工作流的有向超图模型,提出了数据支持能力概念,通过基于数据支持能力的合并操作对模型进行约简。最后优化超图多层剖分算法,提出数据约简的数据密集型工作流调度策略HEFT-P。研究结果表明,HEFT-P相比典型的工作流调度策略HEFT、CPOP、MCP,能够很好地对数据密集型工作流进行约简优化,获得较少的调度时间。 展开更多
关键词 数据密集型工作流 有向超图 数据约简调度 云计算 负载均衡
在线阅读 下载PDF
一种面向数据密集型应用的并行程序执行模型 被引量:2
16
作者 何颂颂 顾乃杰 任开新 《小型微型计算机系统》 CSCD 北大核心 2013年第7期1457-1461,共5页
随着各领域需要处理的数据量越来越大,数据密集型应用也变得越来越被重视.该文提出一种包含数据访存层次和访存冲突等信息的新并行程序执行模型PSRAM(h).针对数据密集型应用以访存为主的特点,PSRAM(h)模型将程序执行时间简化为访存时间... 随着各领域需要处理的数据量越来越大,数据密集型应用也变得越来越被重视.该文提出一种包含数据访存层次和访存冲突等信息的新并行程序执行模型PSRAM(h).针对数据密集型应用以访存为主的特点,PSRAM(h)模型将程序执行时间简化为访存时间,通过分析各程序子段的访存层次和数量来预测串行程序的执行时间,进而通过使用各线程执行时间的最大值来预测并行程序的执行时间.使用PSRAM(h)模型下对最典型的数据密集型应用矩阵向量乘进行分析,在龙芯3A处理器和Intel Xeon E5520处理器两个平台上的测试结果表明,PSRAM(h)模型分析结果与实测结果大部分情况下误差小于20%.由此可见,针对数据密集型应用,PSRAM(h)不但可以给出程序执行时间的下限,还可以有效的预测程序的执行时间. 展开更多
关键词 数据密集型 共享内存 PSRAM(h) 程序执行模型
在线阅读 下载PDF
云环境下面向数据密集型应用的数据选择策略研究 被引量:1
17
作者 杜薇 崔国华 +2 位作者 刘伟 石飞燕 位凯志 《计算机科学》 CSCD 北大核心 2012年第6期30-34,71,共6页
云环境下独立任务包数据密集型应用已出现在多个领域。鉴于多数据中心环境和"按需付费"的资源使用模式,这类应用在数据选择方面面临着新的挑战,主要表现为如何从内容相同但位置和访问成本均不同的数据集中选择合适的数据资源... 云环境下独立任务包数据密集型应用已出现在多个领域。鉴于多数据中心环境和"按需付费"的资源使用模式,这类应用在数据选择方面面临着新的挑战,主要表现为如何从内容相同但位置和访问成本均不同的数据集中选择合适的数据资源作为应用的输入。针对该问题,首先构建云环境和数据选择问题模型。在此基础上,将成本最小化的数据选择过程抽象为带权重集合的覆盖问题,提出一种新的数据选择策略,以在执行效率和经济成本间取得平衡。实验结果显示,提出的数据选择策略在保证成本优化的同时兼顾了执行效率,综合性能良好。 展开更多
关键词 云计算 独立任务包 数据密集型应用 数据选择 带权重集合覆盖
在线阅读 下载PDF
数据密集型科研环境下的高校图书馆发展与思考 被引量:9
18
作者 刘艳红 《图书与情报》 CSSCI 北大核心 2014年第6期127-129,共3页
数据密集型科学环境的兴起与发展,使得高校图书馆在数据处理与科研支撑面临挑战,也将使高校图书馆的资源建设向上游转移、数据服务成为主要服务、数据素养成为图书馆员必备素养。
关键词 数据密集型科学环境 高校图书馆 科学数据 数据服务
在线阅读 下载PDF
有服务质量保证的数据密集型网格应用管理研究 被引量:1
19
作者 石宣化 金海 《计算机科学》 CSCD 北大核心 2007年第6期131-135,共5页
在网格中数据密集型应用的管理由于需要综合考虑多种资源属性而变得非常复杂,本文针对该问题提出了一种有服务质量保证的数据密集型网格应用管理方法,该方法通过两个方面来保证服务质量,首先是通过基于数据可靠性的副本管理策略提高数... 在网格中数据密集型应用的管理由于需要综合考虑多种资源属性而变得非常复杂,本文针对该问题提出了一种有服务质量保证的数据密集型网格应用管理方法,该方法通过两个方面来保证服务质量,首先是通过基于数据可靠性的副本管理策略提高数据的可用性,其次采用基于任务截至期限的任务调度策略来动态调度任务。最后,给出模拟试验测试以及实际网格平台与实际应用的测试,测试结果表明本文提出的方法较其它方法有很大提高。 展开更多
关键词 网格 服务质量 数据密集型 副本管理 截止期限
在线阅读 下载PDF
低复杂度重构在分布式实时数据密集型Web服务架构中的应用 被引量:2
20
作者 李欣 徐亮 蒋兆辉 《计算机应用研究》 CSCD 北大核心 2016年第4期1114-1119,共6页
针对下一代分布式实时系统在重构时实时性要求较高的问题,提出了一种降低系统图复杂度并在有限时间内重构的方法。首先,利用服务组合确保重构在有限时间内实现;然后,通过路径选择算法和路径发送算法对图进行实时剪裁;最后,引入图构建算... 针对下一代分布式实时系统在重构时实时性要求较高的问题,提出了一种降低系统图复杂度并在有限时间内重构的方法。首先,利用服务组合确保重构在有限时间内实现;然后,通过路径选择算法和路径发送算法对图进行实时剪裁;最后,引入图构建算法消除具有更多非可调度路径的服务实现来降低图的复杂度。在i LAND服务重构和组合组件内部验证了该方法,实验结果表明,该方法能够显著减少解空间,大大减少了重构过程的计算时间,可以很好地满足数据密集型Web服务的实时性需求。 展开更多
关键词 低复杂度重构 数据密集型 分布式系统 WEB服务架构 图构建算法
在线阅读 下载PDF
上一页 1 2 4 下一页 到第
使用帮助 返回顶部