-
题名基于ETL技术的多源异构数据融合方法研究
被引量：1
- 1
-
-
作者
杨国立
姜树明
-
机构
浪潮通用软件有限公司
齐鲁工业大学(山东省科学院)情报研究所
-
出处
《齐鲁工业大学学报》
CAS
2024年第4期18-24,共7页
-
基金
国家重点研发计划项目(2019YFB1404700)。
-
文摘
在多源大数据融合阶段处理历年异构的数据时,涉及到多指标和多维度的问题,需要清洗、转换、映射和对齐等操作。相关数据处理工具和方法逐步涌现,但仍难以解决大量数据的交叉融合问题。为此,研究了基于ETL技术的多源异构数据融合方法,分析了常用的ETL工具和数据融合技术,包括数据抽取、转换、加载工具以及数据处理算法。分析了面向灵活需求、业务交叉较多和实时数据流场景时,遇到的数据源异构、数据结构差异、数据更新频率困难等问题,并从模块化设计、逻辑和参数分离、标准化构件库、轻量级JSON格式的配置文件等方面研究了ETL工具模块化扩展和构件重复使用的方法,以便更好地处理大规模异构数据。解决了多源大数据融合阶段的交叉融合问题,对提高数据处理效率、确保数据质量以及支持更深入的数据分析和决策具有重要意义。
-
关键词
教育统计
数据挖掘
转换-抽取-加载
软件工程
-
Keywords
educational statistics
data mining
extract-transform-load
software engineering
-
分类号
TP311.1
[自动化与计算机技术—计算机软件与理论]
-
-
题名MIS数据统计程序的自动生成系统
- 2
-
-
作者
郑跃斌
-
机构
华侨大学计算机科学系
-
出处
《华侨大学学报（自然科学版）》
CAS
1997年第1期98-101,共4页
-
文摘
提出一种用于MIS（计算机辅助管理信息系统）的数据统计程序的程序自动生成系统，阐述，其设计思想、实现方法以及用户界面的设计方法。
-
关键词
软件工程
数据统计
自动生成系统
管理信息系统
-
Keywords
software engineering,data statistics,automatic statistics generaing system
-
分类号
TP399
[自动化与计算机技术—计算机应用技术]
TP311.5
[自动化与计算机技术—计算机软件与理论]
-
-
题名一种统计报表自动生成软件的设计
被引量：1
- 3
-
-
作者
程俊波
-
机构
西安石油学院
-
出处
《西安石油学院学报（自然科学版）》
1999年第5期58-60,共3页
-
文摘
针对企事业单位信息管理系统，分析了利用汉字 Ｄ Ｂ Ｍ Ｓ原理，采用模块处理法和库程序结构方式，对数据库进行处理的统计报表自动生成软件的设计和实现方法，并将软件的使用方法进行了简要说明，对软件中涉及的数据处理主程序和一些主要子程序做了扼要介绍，给统计人员提供了一种统计报表自动生成软件．
-
关键词
数据库
统计报表
自动生成软件
软件设计
-
Keywords
computer management, module, data base, statistical statement automatically forming software Cheng Junbo ( Xian Petroleum Institute, Xian 710065·China ) JXAPI 1999 V.14 N.5 p.58~60
-
分类号
TP311.5
[自动化与计算机技术—计算机软件与理论]
TP315
[自动化与计算机技术—计算机软件与理论]
-
-
题名施工进度计划设计软件开发在水利水电工程中的应用
被引量：1
- 4
-
-
作者
王超
易义红
汪炜
-
机构
中国电建集团昆明勘测设计研究院有限公司
-
出处
《云南水力发电》
2023年第1期175-181,共7页
-
文摘
开发施工进度计划设计工具,通过自定义项目类型等基础数据与项目任务相关联,统计项目工程量、资源消耗、道路运输强度等信息。基于CAD二次开发,定制标准化的CAD横道图和施工强度曲线绘制工具。应用于国内某大型水电工程可研阶段施工进度设计道路运输强度分析及横道图绘制,提高设计的效率和质量。
-
关键词
施工进度
设计软件
数据统计
CAD绘图
工程应用
-
Keywords
construction schedule
design software
data statistic
CAD drafting
engineering application
-
分类号
TV511
[水利工程—水利水电工程]
-
