期货交易自动化论坛

 找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
查看: 33|回复: 0

大数据时代,ETL快速膨胀,企业级统一调度平台大势所趋 - 第4页 - 金融行业 - ITPUB论坛-专业的IT技术社区

[复制链接] |主动推送

285万

主题

285万

帖子

855万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
8553710
发表于 2022-9-11 06:27:38 | 显示全部楼层 |阅读模式
ygjygj 发表于 2013-3-1 14:14

创新力没有那么好吧。
马云把招来的MBA一锅端。
要是一个个炒掉,还能理解,一锅端,可见企业氛围一般. ...
工作中也有过几个读过MBA的同事,清华的、北大的。说实话,我真的不觉的这些MBA们有什么出奇之处,拿着高薪,做着一般的事务性的工作,不惹老板急就有问题了。
大数据是个不错的题材,但是也是新瓶装老酒,还是数据挖掘、数据分析那一套,在CRM、营销上会有一定的应用,但是更多的应用目前似乎还不成熟。
统一调度平台确实是个好东西,可以清晰管理,明确工作,便于维护,但这个也是在大数据应用的基础上才有的,皮之不存,毛将焉附?
koham 发表于 2013-4-28 15:18

工作中也有过几个读过MBA的同事,清华的、北大的。说实话,我真的不觉的这些MBA们有什么出奇之处,拿着高 ...
非常赞同!
不过我倒觉得统一调度平台不仅仅适合于大数据应用
只要涉及了数据迁移的(系统内或系统外),都应该可以通过统一调度平台来管理。
至于是不是适用,要看具备不具备那个量。
fcqqywz 发表于 2014-7-8 09:23

貌似非结构化信息的存储、内容管理平台可以提供楼主所说的功能。
楼主表达的不是这样的哦
他想表达的是:建立企业级的(负载均衡、分布式、高可靠性)的、集中管理式的、实时的、提供多种应用渠道的、监控运维管理平台是当前的ETL的发展趋势。
统一调度不限于ETL,核心、EOD都适用,重要的是兼容系统差异性。不过因为不涉及业务,银行不够重视,个人发展也受制约。
accrete 发表于 2014-7-20 15:45

统一调度不限于ETL,核心、EOD都适用,重要的是兼容系统差异性。不过因为不涉及业务,银行不够重视,个人发 ...
充分屏蔽各个系统的差异化,
统一的应用接口
统一调度平台需要支持各种技术平台的集成。
确实对技术产品提供了极大的挑战!
1、批量系统越建越多:不同的系统,技术要求不同,管理运维要求越来越高、越来越复杂。
2、规模越来越大:目前一般的系统几百个任务算是比较大的了,不排查今后上千上万。因此对批量调度系统的性能要求越来越高,对系统稳定性需求提出了挑战。
3、升级越来越频繁:大多数系统都是采用ETL工具自带的调度方案,或随项目自己开发。随着调度需求的多样化,深入化。现在的有些比较大的项目急需升级才能满足业务发展。导致额外的成本支出,加上人员的流动,系统维护越来越困难。
4、只关心自身项目:不可避免的重复建设,浪费资源。而且对今后系统整合的需求也提出了挑战。
因此,一个统一的、通用的、扩展性优良的批量调度平台工具还是蛮重要的。
建立统一的调度平台不仅仅适用于金融行业吧。
我们单位是制造业,同样需要统一的调度平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|期货交易自动化论坛

GMT+8, 2024-11-24 17:05 , Processed in 0.111321 second(s), 28 queries .

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表