推广 热搜: 广场  Java  app  Word  营业  微信公众号  北京代理记账  商城  代理记账  商标交易 

kettle怎么导出数据 关于oracle抽取数据的问题?

   2023-04-27 企业服务招财猫90
核心提示:关于oracle抽取数据的问题?最近遇到这样一个问题。源oracle有一个包含7亿数据的视图。这个表是第三方的,我们只有读权限。除主键外,源视图没有索引。现在我们必须将其中的所有数据同步到我们的数据库

关于oracle抽取数据的问题?

最近遇到这样一个问题。源oracle有一个包含7亿数据的视图。这个表是第三方的,我们只有读权限。除主键外,源视图没有索引。现在我们必须将其中的所有数据同步到我们的数据库中。我用分页的,从一页中提取5000个片段。刚开始很快,一页数据几百毫秒,越慢。现在找出一页数据差不多要一个小时。以这种速度,你可以不要在一年内全部提取,你可以不要添加索引或任何东西。有什么方法可以提高提取效率吗?

水壶工具非常方便

工具太多:你的需求是一次性的还是多次的?1.如果是一次性的,用oracles自己的数据以极快的速度,然后同步到目的地,再导入。2.如果是多次,你对时效性有什么要求?如果要求高,可以用CDCs实时提取。详细的方案可以参考我的文章,里面有具体的步骤和效果。如果实时性要求不高,该方案可以使用传统的etl工具,如kettle等。,而我的文章也包含了详细的介绍望。

 
反对 0举报 0 收藏 0 打赏 0评论 0
 
更多>同类资讯
推荐图文
推荐资讯
点击排行
合作伙伴
网站首页  |  关于我们  |  联系方式  |  使用协议  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报  |  冀ICP备2023006999号-8