基于大数据ETL引擎的批量智能开发平台研究

曾国文; 梁华生; 钟玲

doi:10.13992/j.cnki.tetas.2024.03.002

Chinese

您当前的位置：

首页 >

文章列表页 >

基于大数据ETL引擎的批量智能开发平台研究

更新时间：2026-04-20

- 基于大数据ETL引擎的批量智能开发平台研究
- Vol. 37, Issue 3, Pages: 20-25(2024)
- 作者机构：
  
  中国移动通信集团广东有限公司东莞分公司
- 作者简介：
- 基金信息：
- DOI：10.13992/j.cnki.tetas.2024.03.002
  CLC： TP311.13
- Published：2024
- 稿件说明：
移动端阅览
曾国文, 梁华生, 钟玲. 基于大数据ETL引擎的批量智能开发平台研究[J]. 2024, 37(3): 20-25.
DOI：

曾国文, 梁华生, 钟玲. 基于大数据ETL引擎的批量智能开发平台研究[J]. 2024, 37(3): 20-25. DOI： 10.13992/j.cnki.tetas.2024.03.002.

摘要

大数据时代，为了能更好提升多样化源数据类型情况下的ETL开发效率，本文提出了一种基于大数据ETL引擎的批量智能开发平台，重构ETL核心代码完善组件功能，用Java代码自研发class方法，智能调度API接口，批量生成全删全插、增量同步、拉链表和数据质量稽核等XML脚本，转译ETL的XML代码为可执行Java代码，降低操作员使用平台的技术难度。通过实操验证，本文提出的方法能增加平台的开发效率，更快速实现需求。

Abstract

关键词

Keywords

references

浅谈可扩展标记语言XML及其应用[J]. 刘涛.内蒙古科技与经济,2012(10)

Java Class文件的结构分析及其解析执行[J]. 张洪娜;刘怡俊;艾君锐.计算机应用与软件,2011(07)

数据仓库在企业中的应用方法研究[J]. 周庆;王倩.网络安全技术与应用,2007(09)

银行信用评估系统数据质量分析方法研究[J]. 肖国荣.福建电脑,2006(08)

数据仓库中ETL技术的研究[J]. 张宁,贾自艳,史忠植.计算机工程与应用,2002(24)

Views

下载量

CSCD

Alert me when the article has been cited

提交

Tools

Publicity Resources

面向家庭宽带业务的端到端数据仓库建设方案

Related Author

陈静

王天竹

池勇

龙杰

Related Institution

中国移动通信集团设计院有限公司

中国移动通信集团有限公司

AI问答

Postal code：100079
Tel：（010）53879206 Email：tmw@bjxintong.com.cn
Technical support is provided by Beijing Founder electronics co., LTD 京ICP备09082226号-64 京公网安备11010602201714号
It is recommended to read the content of this site in Chrome&IE9+. Please switch to extreme mode in browser 360.
Cookies We use cookies to help provide and enhance our service and tailor content. By continuing, you agree to the use of cookies.

⁰