[1]黄怀毅 杨路明.一种轻量级架构的ETL系统设计与实现[J].计算机技术与发展,2008,(06):202-205.
　HUANG Huai-yi,YANG Lu-ming.Design and Implementation of Lightweight Architecture of ETL System[J].,2008,(06):202-205.
点击复制

一种轻量级架构的ETL系统设计与实现()
分享到：

《计算机技术与发展》[ISSN:1006-6977/CN:61-1281/TN]

卷:
期数:
2008年06期
页码:
202-205
栏目:
应用开发研究
出版日期:
1900-01-01

文章信息/Info

Title:
Design and Implementation of Lightweight Architecture of ETL System
文章编号:
1673-629X（2008）06-0202-04
作者:
黄怀毅 杨路明
中南大学信息科学与工程学院
Author(s):
HUANG Huai-yi;  YANG Lu-ming
School of Information Science ＆ Engineering, Central South University
关键词:
ETL; 数据抽取; 数据转换; 数据装载; 架构
Keywords:
ETL;  data extraction ;  data transform ;  data load;  architecture
分类号:
TP311
文献标志码:
A
摘要:
ETL系统是构建数据仓库的关键组件。通过数据抽取、转换和装载工作，完成处理海量数据和构建数据仓库的任务。如何提高数据处理效率和增强系统稳定性是值得研究的问题。根据电信资源数据省级集中分析系统下的实际应用背景，提出了一种轻量级架构的ETL系统，该架构采取的是“化整为零”的思想，把原先核心的抽取和转换的任务部分划分到各个相应的子系统中做初步的处理，这样处理的优点在于应用中减轻了核心ETL引擎的承载负担，各个抽取任务单独进行互不依赖，提高了抽取效率。通过在具体应用环境下系统运行表明采用该架构ETL系统具良好的使
Abstract:
ETL system is a key component responsible for constructing data warehouse. It processes large volumes of data and builds data warehouse through data extraction, transformation and loading. How to efficiently shorten the execution time and enhance system s

相似文献/References:

[1]梁美红 张男楠 李建 伍东 胡永泉 杨静.一种钻井数据仓库ETL系统的设计[J].计算机技术与发展,2010,(03):250.
　LIANG Mei-hong,ZHANG Nan-nan,LI Jian,et al.Design of ETL System for Drilling Data Warehouse[J].,2010,(06):250.
[2]范金花 梁正和.报表系统中ETL通用框架的设计与研究[J].计算机技术与发展,2009,(06):202.
　FAN Jin-hua,LIANG Zheng-he.Design and Research of Universal ETL Framework in Report System[J].,2009,(06):202.
[3]王爽 华庆一.Web系统维护中的逆向工程研究[J].计算机技术与发展,2008,(01):129.
　WANG Shuang,HUA Qing-yi.Research on Reverse Engineering in Maintenance of Web System[J].,2008,(06):129.
[4]王亮 葛玮.ETL过程的思考[J].计算机技术与发展,2008,(10):130.
　WANG Liang,GE Wei.Thinking in ETL Process[J].,2008,(06):130.
[5]吕锋 余丽.基于XML的Web数据抽取研究[J].计算机技术与发展,2007,(06):53.
　LV Feng,YU Li.Study on Web Data Extraction Based on XML[J].,2007,(06):53.
[6]梁晓涛 谢荣传.基于OWL描述本体的语义信息抽取[J].计算机技术与发展,2006,(01):62.
　LIANG Xiao-tao,XIE Rong-chuan.Semantic Information Extraction Based on Ontology Described in OWL[J].,2006,(06):62.
[7]王晓虹 刘莹 张艳凤[].高校数据集成系统的ETL设计与实现[J].计算机技术与发展,2011,(07):186.
　WANG Xiao-hong,LIU Ying,ZHANG Yan-feng.Design and Implementation of ETL Based on University Data Integration System[J].,2011,(06):186.
[8]谢福伟,梁昌勇,马银超. 基于云计算的景区数据仓库应用研究[J].计算机技术与发展,2014,24(09):198.
　XIE Fu-wei,LIANG Chang-yong,MA Yin-chao. Research on Data Warehouse Application of Tourist Areas Data Based on Cloud Computing[J].,2014,24(06):198.
[9]崔有文,周金海. 基于KETTLE的数据集成研究[J].计算机技术与发展,2015,25(04):153.
　CUI You-wen,ZHOU Jin-hai. Research on Data Integration Based on KETTLE[J].,2015,25(06):153.
[10]王梓,梁正和,吴莹莹.基于 Kafka、Disruptor 技术对传统 ETL 的改进[J].计算机技术与发展,2018,28(11):26.[doi:10.3969/ j. issn.1673-629X.2018.11.006]
　WANG Zi,LIANG Zheng-he,WU Ying-ying.Improvement of Traditional ETL Based on Kafka and Disruptor Technology[J].,2018,28(06):26.[doi:10.3969/ j. issn.1673-629X.2018.11.006]
[11]于红蕾 华庆一 刘燕玲 罗养霞.数据仓库在电信统计分析中的应用[J].计算机技术与发展,2007,(08):201.
　YU Hong-lei,HUA Qing-yi,LIU Yan-ling,et al.Application of Data Warehouse to Statistics and Analysis System of Telecom[J].,2007,(06):201.

备注/Memo

备注/Memo:
黄怀毅（1982-），男，湖南郴州人，硕士研究生，主要研究方向为软件架构技术与数据库；杨路明，教授，博士生导师，主要研究方向为计算机网络与大型数据库技术
更新日期/Last Update: 1900-01-01