包含标签 etl 中的文章

[重大更新]可视化调度器tiktok 问世了

项目 地址 https://github.com/BruceDone/Tiktok 背景 在很早之前,博主有介绍过可视化的调度工具,dagobah,不过,那个时候dagobah相当的不稳定,动不动就会奔溃,页面就直接打不开,在尝试过各种进程保护模式,或者docker化之后,都完全无法满足工作里面的需求,后来干脆就直接打算在python2的flask,换成……

阅读全文

SSIS从理论到实战,再到应用(7)----常用的数据类型转换操作

上期回顾: SSIS从理论到实战,再到应用(6)–SSIS的自带日志功能 在抽取各种应用的数据时候,经常会遇到数据需要转换类型的操作,比如日期在源数据库是dbtime类型,在本地需要用到字符串,这个时候有两种常用的方案来解决: 1.通过语法在源数据库进行类型转换,类似sql……

阅读全文

SSIS从理论到实战,再到应用(6)----SSIS的自带日志功能

上期回顾: SSIS从理论到实战,再到应用(5)–流程控制之Foreach循环 博主最近新负责了一个ssis大项目的架构,压力山大,所以都没有怎么正儿八经的更文章了,给园友们说声抱歉,接下来的一些文章可能都比较偏重于实用技巧方面^_^. 我们都知道,不论在任何一个项目,日志……

阅读全文

SSIS从理论到实战,再到应用(5)----流程控制之Foreach循环

上期回顾: SSIS从理论到实战,再到应用(4)–流程控制之For循环 上一期讲了For循环,Foreach循环相比而言要更复杂一点,里面涉及变量的类型,数据接收问题,下面我用一个简单的示例来演示Foreach循环容器: 假设我们有这样一个需求: 从数据库中取出一列数据,循环……

阅读全文

SSIS从理论到实战,再到应用(4)----流程控制之For循环

上期回顾: SSIS从理论到实战,再到应用(3)–SSIS包的变量,约束,常用容器 在SSIS体系中,控制流可能经常会遇到,比如你取得一列数据,需要循环这列数据然后做相应的操作时,就需要用到循环,下面,我来操作两种循环方式,FOR循环和Foreach循环. 一,For循环 写……

阅读全文

SSIS从理论到实战,再到应用(2)----SSIS包的控制流

前文回顾: SSIS从理论到实战,再到应用(1)–创建自己的第一个包 上次说到创建了自己的第一个包,完成了简单的数据从数据库=>数据库,以及Excel文件=>数据库过程,这一次咱们回看看一个包里面到底有哪些好玩的元素构成: 咱们一般写过代码的人都知道,很多的看似……

阅读全文

SSIS从理论到实战,再到应用

一,是什么(What?)1.SSIS是Microsoft SQL Server Integration Services的简称,是生成高性能数据集成解决方案(包括数据仓库的提取、转换和加载 (ETL) 包)的平台.以上的这段文字来自于百度,脱离这个概念,我一直再思考如何向普通人解释SSIS这一套体系:我觉得我自己解释很有可能不到位,……

阅读全文

最近文章

分类

标签

友情链接

其它