Ogg 采集进程和投递进程重推数据

最新推荐文章于 2024-05-05 08:07:35 发布

不想做咸鱼的王富贵

最新推荐文章于 2024-05-05 08:07:35 发布

阅读量1.4k

点赞数 1

分类专栏： java基础

本文链接： https://blog.csdn.net/weixin_43564627/article/details/117707767

版权

java基础专栏收录该内容

70 篇文章 1 订阅

订阅专栏

投递进程重推数据

进入ogg安装主机
找到相对应的投递进程
在采集端 /dirdat文件中，找到重推时间前的trail文件标号

停止投递进程  stop xxxx
重新设置采集点

 alter 进程名 extseqno 1726,extrba 0

extseqno ： trail文件序号
extrba ： 文件内的偏移量

开始投递进程 start xxxx NOFILTERDUPTRANSACTIONS

采集进程重推数据

 当前时间
alter extract REPTEST,begin now 

alter extract e_xm,begin 2020-04-15 16:42 —故障的时间点

alter extract xxx,begin {回拨日期}

立减 ¥

1
点赞
踩
3

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

ogg 查看某条更新_ogg range多个进程读一个TRAIL文件，缓解数据同步延时

weixin_33612966的博客

12-24

792

ogg 当同步某张表的源端有大量并发操作时，如INSERT UPDATE千万级数据记录操作。同步链路的入库进程不能及时的处理，将产生数据同步延时。此时可以使用OGG的range参数据将单个进程拆分为多个进程，同时读取trail文件，并行操作，提高入库进程数据同步效率。防止数据延时对生产的影响。具体操作步骤如下：1. 创建配置文件 vi ggs/dirprmRQFTJ001.prmRQFTJ002....

物流项目中Oracle 数据库的使用及OGG是如何同步_oracle ogg数据同步

2401_84182097的博客

05-04

1129

Oracle GoldenGate 实现原理是通过抽取源端的redo log 或者 archive log ，然后通过TCP/IP投递到目标端，最后解析还原应用到目标端，使目标端实现同源端数据同步。Extract提取Pump进程Collect进程Replicat进程OGG采集数据时，完整结构如上如所示：分为源端SRC和目标端DST，都有自己管理进程MGR。Data pump。

参与评论您还未登录，请先登录后发表或查看评论

OGG新增DataPump进程下发（多个进程共用队列文件）

赚钱把购物车清了。。。

08-15

858

OGG新增DataPump进程下发（多个进程共用队列文件） 2017-08-15 15:50 by AllegroCantabile, ... 阅读, ... 评论, 收藏, 编辑一、背景新增下发表，考虑到源数据库较多，且中转站系统A进程复杂，决定在系统A上新增DataPump进程，将数据投递给系统B。系统A抽取进程EXT...

OGG新增投递进程

sych888的专栏

11-04

4968

在原有运行良好的OGG源端新增一个投递进程以供另外一个目的端使用通过新增投递进程后，以重新设置投递进程的投递队列文件，此时执行命令语法如下： ALTER EXTRACT [pump_name], EXTSEQNO ##### EXTRBA 0 pump_name：投递进程名称 EXTSEQNO ：投递文件的序号，通常是抽取文件名称的后面4位数字

如何查看OGG状态

weixin_44072478的博客

06-02

2877

初学者如何查看OGG的进程状态 1、首先咱们进入你需要查看的ogg所在位置的终端服务器 2、使用 ps -ef|grep rpt 查看当前终端ogg所在的目录 3、我们可以看到ogg所在目录是 xdata/ogg_source 4、使用cd xdata/ogg_source进入ogg所在目录 5、使用 su - oracle 切换用户 5、使用ggsci进入ogg 6、使用info all 即可查看ogg进程状态 ...

OGG 使用原有抽取进程，新增投递进程出现的问题

cuiruipan6325的博客

12-29

1603

原来在集成平台到查询库的ogg链路,已经用了很多天且同步正常。现在我配置了由集成平台到分发库的链路，具体做法是在集成平台库增加一个投递分发库的进程，现在所有的进程都启动正常。但是发现并不能同步操作，主要是在投递进程并未同步响...

ogg修改extract进程从当前抽取

最新发布

2401_84592231的博客

05-05

694

博主所在单位目前使用Oracle GoldenGate将各个业务生产库汇聚到一起做数仓实时ODS平台，源端库可能涉及Oracle、Mysql、达梦、Guassdb库。之前写过一系列关于GoldenGate异构同步Mysql、Kafka、Kylin、Flink做实时计算的场景文章。但是突然发现，卧槽最最最应该第一个做的Oracle->Oracle的实时异构同步文档竟然没写！来弥补一下这个空白！！！好了，扯远了，回归技术！

OGG 中主键与trandata的添加顺序

cuibaodun6837的博客

03-27

445

最近在做OGG的压力测试，源库与目标库采用表级同步。源库有20张表，每张表的列都在30-40个之间，数据量不小。测试时候采用循环执行dml语句的方式来测试OGG同步效果，测试脚本示意如下： ...

ogg extract 参数配置

u010409445的博客

04-25

3839

GGSCI>ADD EXTRACT cw_ext1, tranlog, begin now, threads 2 添加本地队列t1，cw_ext1进程捕捉到的有效数据将写入本地队列 GGSCI>ADD EXTTRAIL ./dirdat/t1, EXTRACT cw_ext1,megabytes 100 为cw_ext1进程配置参数 GGSCI>editparam yx_ext1

OGG管理 -重新配置传输进程和修改检查点

oradbm的博客

07-10

3032

alter extract extpmon_a,begin now alter extract extpmon_a,begin 2013-02-14 11:56:00 alter repmon_c extseqno 1231212 extrba 0 从1231212号tail文件开始复制。 alter repmon_c aftercsn 12122112 过滤数据从scn 12122112的事务处理 --修改抽取进程的开始抽取点：（rp1 的读检查点） alter extract myext BEGI.

extract进程 oracle,OGG-extract进程对应的多余trail文件的删除

weixin_39897505的博客

04-04

648

goldengate的官方文档中说，每个进程对应一个(组)trail文件，每个trail文件只对应一个进程。但实际使用时，由于误操作而给extract进程e_tmp添加了两个trail文件(组)，下面实验是删除方法，即停掉extract进程后执行delete exttrail ./dirdat/xx1)切换到GG_HOME目录，查看进程[oracle@rhlinux ogg]$ pwd/u02/o...

OGG-15051|OGG 同步 Oracle 到 Kafka 时遇到的一个错误

JiekeXu的博客

08-22

2135

作者 | JiekeXu来源 |公众号 JiekeXu DBA之路（ID: JiekeXu_IT）如需转载请联系授权 |(个人微信 ID：JiekeXu_DBA)大家好，我是 JiekeXu,很高兴又和大家见面了,今天和大家一起来学习 OGG 同步 Oracle 到 Kafka 时遇到的一个错误，欢迎点击上方蓝字关注我，标星或置顶，更多干货第一时间到达！有时候随着业务的需要，需要将 Oracle...

Ogg 支持一张表投递多个topic

weixin_43564627的博客

07-22

630

Ogg 支持一张表投递多个topic 验证如下 cd /service/ogg 进入 ogg采集目录然后使用 ./ggsci 命令进入 ogg 命令行采集进程配置采集进程 edit param extp extract extp setenv (nls_lang="american_america.ZHS16GBK") userid oggadmin@pacs, password root1234 reportcount every 30 minutes, rate discardfile /s

ogg 常用命令

qq_40066204的博客

02-25

2743

查询ogg源端ip tail -100f ggserr.log |grep EXTRACT ogg命令总结整理 stats：查看进程抽取数据情况，用于检测数据丢失问题。 info *：用于检测进程读取文件情况信息。 info all：查看所有增量抽取进程以及增量推送进程 info all,task：用于查看全量抽取进程 start/stop mgr：启动/停止 mgr进程 view params *：查看进程所需的配置信息 edit params *：编辑进程所需的配置信息 info exittrail

OGG同步序列配置

欧辰的专栏

03-01

6125

让GG支持序列同步的配置：源端：在设置支持DDL同步后，进入OGG目录，以SYS用户登录数据库： sqlplus "/as sysdba" 执行 sequence脚本： SQL>@sequence.sql 输入gg的DDL同步用户，即之前创建的ggt，完成后，授权： GRANT EXECUTE on ggt.updateSequence TO ggt;

ogg投递进程延迟太高怎么解决

06-10

OGG（Oracle GoldenGate）投递进程延迟高的问题可能由多种原因引起，以下是一些可能的解决方案： 1. 网络问题：如果您的网络连接不稳定或者网络带宽不足，可能会导致OGG投递进程延迟高。您可以尝试增加带宽或者检查网络连接是否正常。 2. 数据量过大：如果您的源数据量过大，可能会导致OGG投递进程延迟高。您可以考虑将数据分批处理，或者使用压缩技术来减少数据传输量。 3. 系统负载过高：如果您的系统负载过高，可能会导致OGG投递进程延迟高。您可以尝试优化系统配置或者增加系统资源。 4. OGG配置问题：如果您的OGG配置不正确，可能会导致投递进程延迟高。您可以检查OGG配置文件是否正确，以及OGG进程参数是否合理。如果以上方法都无法解决问题，建议您联系OGG技术支持人员寻求帮助。