当前位置: 首页 > news >正文

增量:增量处理

增量类型

delta type

增量

应用场景

增量数据

抽数过程

" "

"A"

PUSH

ALE update pointers

数据源通过ALE更新指针确定增量

属性及文本数据源、

一般自定义数据源

"D"

PUSH

增量队列

常用于通过字段或控制表不能确定增量数据的场景,FI_AR/AP或LO

业务发生时,业务应用同步时将数据写入增量队列,如FI_AR/AP或LO的direct delta

或者业务发生后,通过特定作业将增量数据归集到增量队列

从增量队列抽取增量数据

"E"

PULL

extrator根据请求确定增量数据

通过字段(时间戳)或控制表可以确定增量数据的场景

通过增量字段或控制表确定增量数据

通过抽取器确定增量数据

"F"

增量数据通过文件加载

仅用于文件源系统

增量处理

增量处理过程存储在表 RODELTAM 

表结构如下

DELTA

CHAR

4

0

数据源增量处理 ,增量处理的名称

ONLYFULL

CHAR

1

0

BW Delta 处理: 仅使用完全更新 ,标识是否支持增量更新

UPDM_NIM

CHAR

1

0

BW 数据处理: 创建新图象 是否提供新象

UPDM_BIM

CHAR

1

0

BW Delta 处理: 提交前像,是否提供后像

UPDM_AIM

CHAR

1

0

BW Delta 处理: 提交后像,是否提供后像

UPDM_ADD

CHAR

1

0

BW Delta 处理: 附加

UPDM_DEL

CHAR

1

0

BW Delta 处理: 交付删除 ID

UPDM_RIM

CHAR

1

0

BW Delta 处理: 反转像的删除

DREQSER

NUMC

1

0

BW Delta 处理: 序列化请求

是否序列化:

0无所需的序列化,

1 请求序列化,

2 数据包序列化,

这个属性指示了增量队列里的数据与业务实际的数据变化的顺序关系,当增量队列要更新到DSO时,序列化很重要。

DELTATYPE

CHAR

1

0

增量类型:

空     未定义的

A    ALE 更新指针

D    服务 API 的一般 Delta

E    提取器提交 OLTP 源 Delta

F    文件 Delta

X    支持的 Delta, 无进一步的说明 (作废)

表内数据

DELTAONLYFULLUPDM_NIMUPDM_BIMUPDM_AIMUPDM_ADDUPDM_DELUPDM_RIMDREQSERDELTATYPETXTLG
X1仅通过完全上载的增量(操作型数据存储或信息包选择)
AX2AALE 更新指针 (主数据)
ABRXXXX2D带有删除标志的完整增量(通过增量队列)(立方体兼容)
ABR1XXXX1D如方法 'ABR' , 但通过请求序列化
ADDX1E通过提取器的附加提取(例如物流信息系统信息结构)
ADDDX1D如 'ADD' 但是通过增量队列(立方体兼容)
AIEX2E后映像(通过提取器)(FI-GL/AP/AR)
AIEDXX2E带有删除标志的后映像(通过提取器)(FI-GL/AP/AR)
AIMX2D后映像(通过增量队列)(例如 FI-AP/AR)
AIMDXX2D带有删除标志的后映像(通过增量队列)(例如 BtB)
CUBEX0EInfoCube 提取
D2D通过增量队列的非特定增量(非操作型数据存储兼容)
E2E通过提取器的非特定增量(非操作型数据存储兼容)
FIL0X2F增量(通过使用后映像进行文件导入)
FIL1X2F增量(通过使用增量映像进行文件导入)
NEWDX0D仅通过增量队列的新记录(插入)(立方体兼容)
NEWEX0E仅通过提取器(立方体兼容)的新记录(插入)
OXXX0E
ODSXXXX1EODS 提取
X2X不确定的 Delta (禁用!)

常用delta processes及支持的目标对象

ADD (Additive Image)

DSO and Cube

AIE (After Image)

DSO Only

R (Reverse Image)

DSO and Cube

D (Delete Image)

DSO Only

数据源增量处理

数据源支持何种类型的增量处理可查看表 ROOSOURCE-DELTA(源系统)和 RSOLTPSOURCE-DELTA(BW系统)。

http://www.dtcms.com/a/315671.html

相关文章:

  • 游戏行业DDoS攻防实战指南
  • ApplicationContext的实现类有哪些?
  • 「PromptPilot 大模型智能提示词平台」—— PromptPilot × 豆包大模型 1.6:客户投诉邮件高效回复智能提示词解决方案
  • 芯祥科技:工业/车规级BMS芯片厂商 规格选型对比
  • Python import 详解
  • linux_https,udp,tcp协议(更新中)
  • C++ ---》string类的模拟实现
  • CRT调试堆检测:从原理到实战的资源泄漏排查指南
  • HBM Basic(VCU128)
  • nflsoi 7.29 题解
  • Python-深度学习--2信息熵,条件熵(ID3决策树),KL散度
  • 飞算JavaAI—AI编程助手 | 引领开发新时代,智能化编程的完美助手
  • python学智能算法(三十三)|SVM-构建软边界拉格朗日方程
  • 分布式微服务--Nacos持久化
  • Modstart 请求出现 Access to XMLHttpRequest at ‘xx‘
  • 用 Python 构建高质量的中文 Wikipedia 语料库:从原始 XML 到干净段落
  • rabbitMq内容整理
  • PromptPilot搭配Doubao-seed-1.6:定制你需要的AI提示prompt
  • 云计算一阶段Ⅱ——11. Linux 防火墙管理
  • LeetCood算法题~水果成篮
  • [element-plus] ClickOutside点击其他地方
  • 【IDEA】IntelliJ IDEA 中文官方文档全面介绍与总结
  • Docker 部署工程基本命令记录
  • uniapp renderjs 逻辑层,视图层互相传递数据封装
  • 星图云开发者平台赋能商储油安全管控数字化转型
  • 漏洞分析:90分钟安全革命
  • NLP自然语言处理 03 Transformer架构
  • 基于 FFmpeg 与 V4L2 的多路摄像头视频采集,图像处理处理与 RTMP 推流项目(开源)
  • GPU 基础矩阵精规组织教程:从基础作用到实战应用
  • EAGLE-2:通过动态草稿树加速语言模型推理