zoukankan      html  css  js  c++  java
  • Safety Interval Upper/Lower Limit of a Delta Selection(2)

    问题背景:

       

    目前遇到了一个小case,是关于一个有Delta机制的自建数据源总是抽不上来数据。

       

       

    问题原因:

       

    BW的这种Delta机制原理是,系统中记录一个timestamp,比如20110531,这是上次抽取的日期。

    于20110601执行Delta信息包,会抽取ERSDA为20110601-20110601期间的数据。

    刚刚好,赶上处理链执行到该信息包的时间为凌晨2点左右,这就是说,6月1日的数据没有开始录入,而时间戳上显示数据已经抽过了,6月2日抽取的时候只会抽取20110602-20110602的新数据。

       

    所以我们会考虑设置安全上下限。

       

       

    上图的意思是,61日抽取的时候,会加载20110524-20110601的数据,这样数据会有重复,但是不会发生这种严重的丢数现象。

       

       

       

    上图的意思是,6月1日抽取的时候,会加载20110531-20110531的数据,这种其实是最佳的设置方式,即通过推迟时间戳,将数据创建的1天时间扣除。

       

    这个现象可以方便的从RSA7中看到,那里的timestamp显示为20110531。而6月2日抽取时,timestamp为20110601,会抽取20110601的数据。

  • 相关阅读:
    laravel-admin 关闭debug模式导致异常信息到页面的排查
    laravel-sql
    laravel任务调度出现僵尸进程
    PHP获取首字母笔记
    IP库笔记
    深入理解 js 闭包
    用键盘实现上下选择
    密码保护
    评分效果
    数组去重
  • 原文地址:https://www.cnblogs.com/hanmos/p/2597846.html
Copyright © 2011-2022 走看看