期刊文献+
共找到1,460篇文章
< 1 2 73 >
每页显示 20 50 100
基于Data Warehouse技术的数据可视化的应用 被引量:2
1
作者 赵欣 赵海 徐凌宇 《东北大学学报(自然科学版)》 EI CAS CSCD 北大核心 2000年第4期365-367,共3页
给出了一个基于DataWarehouse技术的市民投诉系统的设计与实现·系统由管理子系统、语音信箱、分析决策子系统 3部分组成 ,其中分析决策子系统是实现的关键·采用DataWarehouse技术 ,以ROLAP为主要方法 ,将数据可视化技术应用于... 给出了一个基于DataWarehouse技术的市民投诉系统的设计与实现·系统由管理子系统、语音信箱、分析决策子系统 3部分组成 ,其中分析决策子系统是实现的关键·采用DataWarehouse技术 ,以ROLAP为主要方法 ,将数据可视化技术应用于DataWarehouse,实现了多维数据的可视化处理·系统已在多个城市的投诉中心投入运行 ,取得了良好的社会效益· 展开更多
关键词 datawarehouse DSS系统 数据可视化 数据仓库
在线阅读 下载PDF
Preliminary Study in Spatial Data Warehouse of Flood Control and Disaster Mitigation in Yangtze River Basin
2
作者 ZHAN Xiao guoSenior engineer, Yangtze River Scientific Research Institute, Changjiang Water Resources Commission, Wuhan 430010, China 《人民长江》 北大核心 2002年第S1期90-92,共3页
Since 1990s,the spatial data warehouse technology has rapidly been developing, but due to the complexity of multi-dimensional analysis, extensive application of the spatial data warehouse technology is affected. In th... Since 1990s,the spatial data warehouse technology has rapidly been developing, but due to the complexity of multi-dimensional analysis, extensive application of the spatial data warehouse technology is affected. In the light of the characteristics of the flood control and disaster mitigation in the Yangtze river basin, it is proposed to design a scheme about the subjects and data distribution of the spatial data warehouse of the flood control and disaster mitigation in Yangtze river basin, i.e., to adopt a distributed scheme. The creation and development of the spatial data warehouse of the flood control and disaster mitigation in Yangtze river basin is presented .The necessity and urgency of establishing the spatial data warehouse is expounded from the viewpoint of the present situation being short of available information for the flood control and disaster mitigation in Yangtze river basin. 展开更多
关键词 spatial data warehouse distributional scheme FLOOD control and DISASTER MITIGATION YANGTZE RIVER
在线阅读 下载PDF
抢先赢得商机的Data Mining──基于数据仓库的数据挖掘技术 被引量:2
3
作者 王春梅 王曙燕 《现代电子技术》 2006年第12期98-100,共3页
首先介绍了数据仓库以及在此技术上产生的数据挖掘技术,其次阐述了实现数据挖掘应用的几种工具以及选用工具时应遵循的原则,最后说明了数据挖掘技术现存的问题及他现在重要的商业地位。
关键词 数据仓库(DW) 数据挖掘 联机分析处理(OLAP) 建模
在线阅读 下载PDF
基于数据中台的高校数据服务设计与开发方法
4
作者 刘宇 何海涛 +1 位作者 关伟豪 戴园园 《计算机应用》 北大核心 2025年第S1期214-217,共4页
当前高校在数字化转型的道路上,面临着数据场景设计不够深入、数据价值提取能力不足和缺乏标准化的数据服务应用设计架构等重要挑战。为应对这些问题,结合数据中台在数据处理方面的高效能力和微服务架构的高度灵活性与敏捷性,提出一套... 当前高校在数字化转型的道路上,面临着数据场景设计不够深入、数据价值提取能力不足和缺乏标准化的数据服务应用设计架构等重要挑战。为应对这些问题,结合数据中台在数据处理方面的高效能力和微服务架构的高度灵活性与敏捷性,提出一套系统化的数据服务设计流程与开发方案。首先,概述所采用的数据中台体系和微服务架构;其次,详细讨论数据服务支撑体系的设计;最后,以中山大学的数据服务建设实践为例,通过一系列数据应用场景的建设表明该方案不仅能显著提高服务的数据处理和响应效率,还可以增强数据在多样化校园场景中的应用能力和价值传递,为高校数字化转型的深入发展提供有力支撑。 展开更多
关键词 数据中台 微服务 数据治理 数据仓库 数据服务
在线阅读 下载PDF
黄河上游多灾种多源预警数据库管理系统设计与实现
5
作者 郑元勋 周康康 +4 位作者 胡少伟 张海超 于国卿 徐路凯 彭浩 《人民黄河》 北大核心 2025年第7期84-90,96,共8页
针对黄河上游龙羊峡至刘家峡区间多灾种预警工作需求,开展灾害数据的收集、管理和数据库系统的设计研究。首先收集各类灾害数据,将数据划分为结构化数据、空间数据和文件型数据,分别采用对应存储方式,如结构化数据用PostgreSQL数据库、... 针对黄河上游龙羊峡至刘家峡区间多灾种预警工作需求,开展灾害数据的收集、管理和数据库系统的设计研究。首先收集各类灾害数据,将数据划分为结构化数据、空间数据和文件型数据,分别采用对应存储方式,如结构化数据用PostgreSQL数据库、空间数据用File-based Geodatabase文件型地理数据库、文件型数据用文件夹分层存储,并通过不同方式实现数据共享;其次构建数据仓库,划分地质灾害公共信息、单体灾害预测预警等4个主题,确定维度模型,利用Kettle的ETL流程实现多源数据分析;最后采用B/S架构开发黄河上游多灾种数据库管理系统,涵盖数据采集、应用支撑、系统应用和系统用户4个层次,具备基础数据管理、地图展示、监测数据分析等功能。 展开更多
关键词 多灾种 数据库 数据仓库 管理系统
在线阅读 下载PDF
电商仓库货位分配优化研究
6
作者 蒋存波 韩蛟 张奕 《机械设计与制造》 北大核心 2025年第7期46-50,共5页
仓储是商品流通链的重要环节,许多学者对货位分配问题进行了研究,但这些成果不完全适用于电商仓库。分析网络零售与传统零售不同的特点后,提出了评价指标,建立了含三个优化目标的数学模型。随后在一种改进鱼群算法的基础上,针对电商特... 仓储是商品流通链的重要环节,许多学者对货位分配问题进行了研究,但这些成果不完全适用于电商仓库。分析网络零售与传统零售不同的特点后,提出了评价指标,建立了含三个优化目标的数学模型。随后在一种改进鱼群算法的基础上,针对电商特点引入了反向变异和维度交换,提出了一种鱼群货位分配算法(SLA_AFSA)。最后在公共数据集基础上,通过数据挖掘得到相应的实验参数,用层次分析法分配优化目标权重,实验结果显示SLA_AFSA更适用于电商仓库的货位分配问题,有效优化了模型的三个目标。 展开更多
关键词 电商仓库 数据挖掘 货位分配 智能优化算法 反向变异 维度交换
在线阅读 下载PDF
基于订单数据分析的B2B物流网络设计与订单配载决策优化
7
作者 郭晓龙 王润泽 +1 位作者 王磊 李肖潇 《工程管理科技前沿》 北大核心 2025年第3期61-68,共8页
如何在保证低成本的同时处理小批量多品规的订单是B2B企业物流管理中亟待解决的问题。本文以最小化运输成本与运输时效加权和为目标函数,对订单配载、车辆装载和运输路线进行联合决策。本文通过企业订单数据分析挖掘客户订单特点,提出... 如何在保证低成本的同时处理小批量多品规的订单是B2B企业物流管理中亟待解决的问题。本文以最小化运输成本与运输时效加权和为目标函数,对订单配载、车辆装载和运输路线进行联合决策。本文通过企业订单数据分析挖掘客户订单特点,提出了中心库加前置库的物流网络方案,并结合订单配载算法为企业设计一个高效的物流仓库网络与订单配载决策系统。首先,进行订单分级处理并结合时间序列需求预测算法确定中心库的库存容量;其次,根据聚类算法和客户位置进行前置库的选址决策;再次,按照订单分类和物流网络进行订单配载和运输路线决策。结合企业实际销售数据,本文实现了针对该企业销售情况的物流网络设计方案,验证了所提出方法的有效性。 展开更多
关键词 数据分析 物流网络 订单配载 时间序列 聚类算法
在线阅读 下载PDF
面向传染病监测预警的时空数据仓库与分析工具
8
作者 李成仁 《测绘通报》 北大核心 2025年第6期162-167,共6页
传染病传播过程中蕴含着大量的时空信息,为进一步挖掘时空信息价值,提升传染病监测预警能力,本文综合基础时空数据和传染病传播时空数据等信息,构建了面向传染病监测预警的时空数据仓库与分析工具,重点研究了基于空间立体网格的统一空... 传染病传播过程中蕴含着大量的时空信息,为进一步挖掘时空信息价值,提升传染病监测预警能力,本文综合基础时空数据和传染病传播时空数据等信息,构建了面向传染病监测预警的时空数据仓库与分析工具,重点研究了基于空间立体网格的统一空间码编码、基于机器学习的地址识别纠错,以及WebGIS环境下的时空聚集性分析等关键技术,实现了传染病数据分布和推演结果的分析与可视化,为传染病监测预警提供精细化的风险区域预警与决策支撑能力。 展开更多
关键词 传染病 监测预警 数据仓库 时空数据 时空分析
在线阅读 下载PDF
综合物资储备主数据构成与应用研究 被引量:1
9
作者 赖伟玲 赵子明 +2 位作者 周园园 王昕灵 王瑾 《粮油食品科技》 北大核心 2025年第2期28-33,共6页
收储是储备的核心业务之一,物资入库环节产生或使用大量的数据,是储备数据资产的重要来源,也是被其他业务频繁使用的对象。为补充完善物资储备数据领域中主数据相关研究,假设综合物资入库时产生或使用的数据约等于综合物资储备主数据,... 收储是储备的核心业务之一,物资入库环节产生或使用大量的数据,是储备数据资产的重要来源,也是被其他业务频繁使用的对象。为补充完善物资储备数据领域中主数据相关研究,假设综合物资入库时产生或使用的数据约等于综合物资储备主数据,从业务品种对象、参与机构等多个角度综合考量,发现上海期货交易所交割物资仓单形成与综合物资入库具有相似性,且其标准仓单系统经过与市场多年“磨合”已经非常成熟,可为综合物资储备主数据构成提供较好的借鉴价值。通过对上海期货交易所标准仓单系统运营数据的梳理和分析,得出物资、位置、人员、供货方、物流等多类信息数据必要性,提出综合物资储备主数据构思与数据未来应用展望。 展开更多
关键词 主数据 综合物资储备 标准仓单系统 数据应用
在线阅读 下载PDF
基于大数据的烟草仓库温湿度智能调控系统设计
10
作者 赵子佳 郑晓耘 +3 位作者 李净凯 张娜 刘小丽 刘远上 《湖北农业科学》 2025年第5期141-146,共6页
以石家庄卷烟厂烟草仓库为对象,引入大数据分析技术,编写温湿度采集模块、功能模块、开发模块,设计烟草仓库温湿度智能调控系统,实现了仓库内温湿度的自动计算、智能判定和手机预警,并进行烟草仓库温湿度的调控试验。结果表明,烟草仓库... 以石家庄卷烟厂烟草仓库为对象,引入大数据分析技术,编写温湿度采集模块、功能模块、开发模块,设计烟草仓库温湿度智能调控系统,实现了仓库内温湿度的自动计算、智能判定和手机预警,并进行烟草仓库温湿度的调控试验。结果表明,烟草仓库温湿度智能调控系统温湿度调控的平均响应时间从93 s减少至6 s,平均有效调整率从68%提高至100%。该系统自动监测库内温湿度,当温湿度达到预警条件时及时向手机端发送预警信息,报警准确率达100%,实现烟草仓库温湿度智能管控,提高了设备利用率。 展开更多
关键词 大数据分析 烟草仓库 温湿度 智能调控系统 设计
在线阅读 下载PDF
基于动态时间窗格的数据仓库流批一体优化方法
11
作者 陈滨林 唐小勇 《计算机应用研究》 北大核心 2025年第8期2460-2466,共7页
数据仓库是企业数据管理核心,批处理和流处理是大数据分析的两种核心数据处理范式。为了解决传统批处理技术产出时延和资源消耗高的问题,以及流处理技术在处理多流数据关联和历史数据计算时面临的数据质量挑战,提出了一种流批一体处理... 数据仓库是企业数据管理核心,批处理和流处理是大数据分析的两种核心数据处理范式。为了解决传统批处理技术产出时延和资源消耗高的问题,以及流处理技术在处理多流数据关联和历史数据计算时面临的数据质量挑战,提出了一种流批一体处理方法。所提方法通过分析数据集在不同时间窗格中的变化,融合了基于调度时间的动态时间窗格划分和基于DFS算法的最简数据集搜索。实验结果表明,与主流微批处理方法相比,该方法将整体计算时间缩短57.2%,内存消耗减少24.2%,同时确保了数据的强一致性。该方法对于企业构建高处理效率、低资源消耗的流批一体化数据仓库具有重要参考价值。 展开更多
关键词 数据仓库 数据流处理 动态时间窗格 最简数据集 流批一体化
在线阅读 下载PDF
基于Hadoop技术的加速器大数据安全存储与高效分析系统设计 被引量:9
12
作者 赵子晨 杨锋 +3 位作者 郭玉辉 陈又新 李钊扬 刘海涛 《现代电子技术》 北大核心 2024年第8期9-17,共9页
为了解决当前加速器控制系统在数据管理方面所面临的海量数据安全存储和高效分析处理的问题,在现有的基础上引入了Hadoop大数据框架,并结合大数据其他相关组件,构建一个分布式数据仓库系统。文章详细阐述了数据仓库的搭建过程,包括软硬... 为了解决当前加速器控制系统在数据管理方面所面临的海量数据安全存储和高效分析处理的问题,在现有的基础上引入了Hadoop大数据框架,并结合大数据其他相关组件,构建一个分布式数据仓库系统。文章详细阐述了数据仓库的搭建过程,包括软硬件架构以及将数据从现有数据库抽取、转换和加载到数据仓库的方案。特别是针对系统归档数据的存储和分析需求,根据实际应用场景设计一个基于HBase的存储解决方案。在系统部署完成后,进行了吞吐量测试,并与当前使用的传统数据库进行性能对比。测试结果显示,基于Hadoop的数据仓库系统在海量数据存储、高性能查询以及数据分析处理方面都表现出明显的优势。这一改进为加速器控制系统提供了更强大的数据管理和处理能力,有望为加速器在未来的发展提供更多可能性。 展开更多
关键词 数据仓库 Hadoop技术 加速器 大数据 安全存储 HBASE ETL
在线阅读 下载PDF
基于Visual Studio下MES系统开发与应用 被引量:1
13
作者 王林森 王存堂 +3 位作者 牛首印 王海霞 刘庆升 刘艺梅 《制造技术与机床》 北大核心 2024年第8期97-104,共8页
针对自动化罐装产线存在工序间实时信息无法互享互通,生产数据滞后,订单、制造、仓储模块间不协同的问题,基于Visual Studio软件,在C/S架构模式下,设计开发了自动化罐装产线的MES系统。可实现订单排产功能对生产订单全周期管理、数据监... 针对自动化罐装产线存在工序间实时信息无法互享互通,生产数据滞后,订单、制造、仓储模块间不协同的问题,基于Visual Studio软件,在C/S架构模式下,设计开发了自动化罐装产线的MES系统。可实现订单排产功能对生产订单全周期管理、数据监控经S7协议实时采集产线数据、SQL Server数据库对信息储存和分析、仓储管控实现自动化、精益化产品库存管理。MES系统产线运行表明,订单准时交付率100%,采集产线数据完整精确,仓储管控智能精益。为产业“智改数转”提供了典型的工程应用范例和借鉴。 展开更多
关键词 罐装产线 MES系统 订单排产 数据监控 仓储管控
在线阅读 下载PDF
基于“湖仓一体”技术的城轨大数据平台设计与升级改造实践 被引量:4
14
作者 吴雁军 光志瑞 +1 位作者 李明华 陈建华 《都市快轨交通》 北大核心 2024年第1期54-62,共9页
为了探寻城市轨道交通行业大数据平台建设与升级改造的最优方案,本文以城轨大数据平台为研究对象,从城轨大数据平台发展历程出发,梳理城轨大数据平台发展的3个阶段,分析各阶段大数据平台所采用的技术与优缺点,重点总结当前阶段“湖仓一... 为了探寻城市轨道交通行业大数据平台建设与升级改造的最优方案,本文以城轨大数据平台为研究对象,从城轨大数据平台发展历程出发,梳理城轨大数据平台发展的3个阶段,分析各阶段大数据平台所采用的技术与优缺点,重点总结当前阶段“湖仓一体”大数据技术所具备的湖仓一体、流批一体、OLTP+OLAP、多重负载等优点,研究了基于该技术的大数据平台架构升级改造设计要点,并将该技术在北京地铁数据中心的大数据平台升级改造中进行应用验证。结果表明:“湖仓一体”大数据平台技术兼具数据湖的低成本、数据仓库的高性能等优点,解决了原大数据平台在性能、容量与多用途支持上的不足,为城轨行业大数据平台建设与升级改造提供了新的解决思路。 展开更多
关键词 城市轨道交通 大数据平台 升级改造 湖仓一体 流批一体 数据仓库 数据湖
在线阅读 下载PDF
基于AdaBoost模型和SVM模型的铁水温度预测 被引量:1
15
作者 李欣 李宏扬 +4 位作者 刘然 刘小杰 唐文文 吕庆 陈树军 《炼铁》 CAS 北大核心 2024年第3期66-70,共5页
以某炼铁厂3号高炉实际生产数据为基础,针对原始数据存在的重复值、缺失值和异常值等问题进行数据处理,选用AdaBoost模型和SVM模型对铁水温度进行预测。结果表明,AdaBoost模型相较于SVM模型取得更好的预测效果,R达到0.878,±5℃预... 以某炼铁厂3号高炉实际生产数据为基础,针对原始数据存在的重复值、缺失值和异常值等问题进行数据处理,选用AdaBoost模型和SVM模型对铁水温度进行预测。结果表明,AdaBoost模型相较于SVM模型取得更好的预测效果,R达到0.878,±5℃预测准确率为85.21%,可满足高炉实际生产需要。基于高炉炼铁数据仓库系统,建立FineBI前端工具与铁水温度预测应用的数据连接,构建由特征参数、相关性分析、预测结果、模型评估和预测曲线等模块组成的前端界面,实现了高炉铁水温度预测应用的可视化展示。 展开更多
关键词 高炉 铁水温度预测 AdaBoost模型 SVM模型 数据仓库
在线阅读 下载PDF
数据仓库中数据质量控制研究 被引量:39
16
作者 方幼林 杨冬青 +3 位作者 唐世渭 张卫华 余利波 付强 《计算机工程与应用》 CSCD 北大核心 2003年第13期1-4,共4页
随着数据仓库的深入应用,数据质量问题成为关系到数据仓库建设成败和数据能否有效应用的重要关键问题。该文首先讨论数据仓库环境下存在的数据质量问题以及保证数据质量的重要性,然后提出数据质量的度量和评价指标,最后给出了数据仓库... 随着数据仓库的深入应用,数据质量问题成为关系到数据仓库建设成败和数据能否有效应用的重要关键问题。该文首先讨论数据仓库环境下存在的数据质量问题以及保证数据质量的重要性,然后提出数据质量的度量和评价指标,最后给出了数据仓库实施和运行过程中数据质量控制的数据质量成熟度模型和保证仓库数据质量的方法。 展开更多
关键词 数据质量 数据仓库 质量控制 数据质量成熟度模型
在线阅读 下载PDF
数据仓库中ETL技术的研究 被引量:120
17
作者 张宁 贾自艳 史忠植 《计算机工程与应用》 CSCD 北大核心 2002年第24期213-216,共4页
作为数据仓库的关键部件,支持数据抽取、清洗、转换和装载的工具集对任何数据仓库工程都是一个必不可少的成功因素。该文简单介绍了ETL技术,包括ETL的相关概念、ETL在数据仓库中的功能和重要地位以及现有的研究成果,然后重点介绍了ETL... 作为数据仓库的关键部件,支持数据抽取、清洗、转换和装载的工具集对任何数据仓库工程都是一个必不可少的成功因素。该文简单介绍了ETL技术,包括ETL的相关概念、ETL在数据仓库中的功能和重要地位以及现有的研究成果,然后重点介绍了ETL的具体设计和实现方法。 展开更多
关键词 数据仓库 ETL 数据库 数据模型 数据抽取 数据转换 数据清洗 数据装载
在线阅读 下载PDF
面向数据集成的ETL系统设计与实现 被引量:21
18
作者 钟华 冯文澜 +1 位作者 谭红星 黄涛 《计算机科学》 CSCD 北大核心 2004年第9期87-89,F004,共4页
ETL是一类用于从一个或多个业务数据库中抽取数据,进行清理转换并加截到数据仓库中的工具。这个数据抽取、转换和加载的过程能够很好地应用于数据集成领域中,实现不同机构之间数据的交换与整合。通过分析数据集成的一些特点,我们提出了... ETL是一类用于从一个或多个业务数据库中抽取数据,进行清理转换并加截到数据仓库中的工具。这个数据抽取、转换和加载的过程能够很好地应用于数据集成领域中,实现不同机构之间数据的交换与整合。通过分析数据集成的一些特点,我们提出了一个ETL过程模型,开发了一个面向数据集成的ETL系统DataIntegrator。本文对ETL过程模型、系统总体结构及若干关键技术进行论述。DataIntegrator已经应用于信息系统的建设中,为企业应用集成提供了很好的支持。 展开更多
关键词 ETL 数据集成 过程模型 数据抽取 企业应用集成 数据仓库 转换 系统总体结构 业务数据 信息系统
在线阅读 下载PDF
基于数据仓库和数据挖掘技术的温室决策支持系统 被引量:27
19
作者 王成 李民赞 +4 位作者 王丽丽 董平 乔晓军 郝瑞瑞 杨月英 《农业工程学报》 EI CAS CSCD 北大核心 2008年第11期169-171,共3页
农业领域的专家知识多是描述性和经验性的知识,难以进行精确的数学描述,这给农业决策支持系统的构建带来了一定的困难。为解决这种传统的决策支持系统的不足,介绍了基于数据仓库技术和数据挖掘技术构建的温室决策支持系统。该系统通过... 农业领域的专家知识多是描述性和经验性的知识,难以进行精确的数学描述,这给农业决策支持系统的构建带来了一定的困难。为解决这种传统的决策支持系统的不足,介绍了基于数据仓库技术和数据挖掘技术构建的温室决策支持系统。该系统通过建立数据仓库来存储各种来自异质的信息源的数据,利用联机分析处理实现多维数据分析,然后通过数据挖掘技术从数据仓库中获得新的农业知识,以丰富决策支持系统的知识库。在系统的实现过程中,采用了SQL Server分析服务,实现数据挖掘与数据仓库以及应用程序的紧密耦合,从而大大提高了数据挖掘效率。将数据仓库、联机分析处理、数据挖掘三者结合起来形成了一种新的温室决策支持系统。 展开更多
关键词 数据挖掘 数据仓库 数据处理 联机分析处理 决策支持系统
在线阅读 下载PDF
面向数据质量的ETL过程建模与实现 被引量:23
20
作者 贾自艳 黄友平 +3 位作者 罗平 李嘉佑 秦亮曦 史忠植 《系统仿真学报》 CAS CSCD 2004年第5期907-911,914,共6页
为了给数据仓库提供高质量的数据,在数据装载到数据仓库之前必须经过数据的抽取-转换-装载(Extraction-Transformation-loading,ETL)这一系列的预处理工作。复杂性和可用性是制约ETL系统的两大基本问题。为解决这些问题,给出了ETL过程... 为了给数据仓库提供高质量的数据,在数据装载到数据仓库之前必须经过数据的抽取-转换-装载(Extraction-Transformation-loading,ETL)这一系列的预处理工作。复杂性和可用性是制约ETL系统的两大基本问题。为解决这些问题,给出了ETL过程统一的体系结构设计,包括ETL元数据对象建模、ETL转换函数设计、ETL任务建模以及ETL任务模型的描述语言(XTDL)。基于该体系结构和设计思想开发出一个ETL系统—MSETL,目的是为多策略数据挖掘平台(MSMiner)提供高质量的数据。它提供友好界面并对ETL过程进行统一的元数据管理,包括:ETL转换函数的注册和删除;任务模型的生成、执行和删除等功能。 展开更多
关键词 数据仓库 数据质量 抽取-转换-装载(ETL) 数据挖掘 数据清洗
在线阅读 下载PDF
上一页 1 2 73 下一页 到第
使用帮助 返回顶部