SharePlex实施文档以及常见故障.docx
- 文档编号:6122333
- 上传时间:2023-01-04
- 格式:DOCX
- 页数:35
- 大小:603.69KB
SharePlex实施文档以及常见故障.docx
《SharePlex实施文档以及常见故障.docx》由会员分享,可在线阅读,更多相关《SharePlex实施文档以及常见故障.docx(35页珍藏版)》请在冰豆网上搜索。
SharePlex实施文档以及常见故障
1.SharePlex安装配置局部
端口:
2100:
SharePlex默认端口。
2501:
startlauncher需要开启端口,可以使用copy快速复制表。
安装前数据库操作
打开数据库最小附加日志:
首先查看v$transaction视图有没有大事务,尽量防止有大事务的时候执行,如果系统资源非常紧会导致宕机,RAC情况下各个节点都需要执行。
alterdatabaseaddsupplementallogdata(primarykey,uniqueindex)columns;
查询最小附加日志情况:
selectSUPPLEMENTAL_LOG_DATA_MIN,SUPPLEMENTAL_LOG_DATA_PK,SUPPLEMENTAL_LOG_DATA_UI,SUPPLEMENTAL_LOG_DATA_FK,SUPPLEMENTAL_LOG_DATA_ALLfromv$database;
源库需要打开归档。
使用oracle用户解压,安装。
1.2ora_setup配置
--配置shareplex,配置时如果需要自定义复制的源与目标端的ORACLE_SID,如此需要配置tnsnames.ora别名,且/etc/oratab中必须有对应于自定义的tnsnames别名的ORACLE_SID。
1.3sp_cop-u2300&启动
[splexlocalhost~]exportSP_SYS_HOST_NAME=cluster1vip可以使用该参数指定shareplex启动到指定的IP上,可以使用netstat-an|grep
--启动-u可以启动shareplex实例到指定端口,可以复制多个库。
1.4sp_ctrl控制台
SharePlex日常操作都在sp_ctrl控制台中进展,启动命令为:
/
1.5config配置文件
Config配置文件为复制链路需要复制对象以与链路映射文件。
sp_ctrl>listconfig
sp_ctrl>verifyconfig
sp_ctrl>activateconfig
sp_ctrl>activateconfig
activate尽量执行两次,确保成功,可以同时tail-f
config配置样例以与配置规如此:
#sourcetablestargettablesroutingmap
#splex.demo_srcsplex.demo_desttarget_systemo.target_sid
--target_sid为目标端的sid或别名。
Øsplex.demo_src--源库的用户名.表名,可以使用%通配符,全匹配半匹配等。
priv%not(table_name)排除表。
Ø
Øtarget_systemo.target_sid--目标库的IP或hosts文件中映射名为目标端的sid或别名。
Øhr.testhr.test192.168.204.151:
scott_tabo.honor1--IP或主机名后加冒号,可以为该表复制单独起一个队列。
Ømary.cust2!
key(c1,c2)mary.cust2prodao.sid--自定义pk
1.6analyzeconfig
--可以分析config,生成报表,分析数据库表操作频繁记录等。
2.SharePlex常用操作
2.1copy命令
命令说明:
会将目标先truncate掉,然后再利用expdp加constraint=y参数导出再导入,如果你不想truncate目标端的原有同步数据如此你需要使用另一个命令append
copy命令可实现单表或表分区的同步,不适合大批量表的同步。
使用要求:
目标端启动launcher:
sp_ctrl>startlauncher――默认端口是2501
同步的表出现在已激活的配置文件中。
目标端的复制表所属用户需先建立,copy可以创建表结构,但要求表空间不变,所以建议先建好表结构再复制。
语法如下:
sp_ctrl>copyowner.tablename[attarget_host]
如果一样的对象复制到不同的主机,需加attarget_host选项,源端和目标端的用户名或者表名不一致的话还需参加目标端的owner.tablename。
检查源端的copy状态:
sp_ctrl>copystatusall
copystatus
cancel
当日志积累多了不方便查看时,可去除日志:
源端去除日志:
sp_ctrl>clearhistoryall
目标端去除:
cdvardir/log;rmsync_clt*log
2.2pare与repair
如果发现或怀疑源端和目标端的表数据不一致,可以通过pare命令查看和修复。
但由于pare需要把比拟的数据排序,然后逐条比拟,大量数据的比拟可能会导致资源的过量使用,所以不建议对大量数据的比拟。
sp_ctrl>paretableowner.tabletoowner.tabletargettarget_hosto.targetsid[repair]
比拟表分区:
sp_ctrl>paretableowner.tablep1toowner.tablep1targettarget_hosto.targetsid[repair]
直接修复在后面加上repair,不加repair参数如此将可用于修复的SQL语句生成在日志文件中。
查看比拟进度:
sp_ctrl>showpare[detail]
取消比拟:
sp_ctrl>parecancelid
去除比拟日志:
sp_ctrl>removelogpareid
可以指定pare使用其他端口,不指定如此随机选端口:
paretableowner.tablep1toowner.tablep1targettarget_hosto.targetsid[repair]port2500
2.3param设置参数
sp_ctrl>listparamall--列出所有参数。
sp_ctrl>setparam--设置参数
sp_ctrl>listparammodified--查看被修改的参数
shareplex安装目录说明:
/bin包含可执行程序的符号连接
/.app_modules包含可执行程序
/data默认参数文件,包含默认的参数设置
/doc空目录
/installSharePlex安装、license管理等相关的脚本
/libSharePlex应用到的库文件
/utilSharePlex工具,SQL脚本,监控脚本等
2.4去除当前复制
sp_ctrl>shutdown
$env|grepSP_SYS_VARDIR--一定要在去除之前确认清理的实例正确。
执行下条语句之前一定确认上述参数正确,防止清理掉正在使用的实例。
$ora_cleanupsplex/splex
2.5SharePlex实用参数命令
exportSP_SYS_VARDIR=/splex/vardir--类似ORACLE_SID,指定splex使用指定的队列配置文件等等。
exportSP_SYS_HOST_NAME–在启动sp_cop之前设置,指定SharePlex启动在指定的IP上,在RAC安装时需要注意此选项。
sp_ctrl>setparamSP_OPO_DISABLE_OBJECT_NUM<源端object_ID>--在目标端设置。
抛弃指定表。
sp_ctrl>r202--执行上条命令20次,两秒一次。
sp_ctrl>helptarget
sp_ctrl>targeto.orclsetmetadatatime:
sp_time.op:
sp_op--可以在目标端增加列,写入时间戳与DML语句行为。
sp_ctrl>helptargetsetmetadatatime
2.6忽略大事务的操作
过大的事务复制可能会遇到问题,所以建议所有大于1000万数据DML操作事务,分成多批次mit,并建议不要对一样表做并行的大事物操作。
在有的场景下可能不希望源端的某些修改复制到目标端,比如源端去除历史数据而目标端需要保存等。
具体步骤如下:
源端,在数据库中以shareplex用户执行util目录下的create_ignore.sql,该脚本创建了SHAREPLEX_IGNORE_TRANSprocedure;只需执行一次。
在执行大的事务前先执行这个procedure,即可忽略对该事务(从这个存储过程至下一个mit之间的所有DML操作)的复制,如:
SQL>conntest/test
SQL>execsplex.shareplex_ignore_trans;
SQL>insertintotb1values(100,'aaa');
SQL>mit;
2.7修改SharePlex的数据库用户密码
SharePlex数据库用户的密码还存在于SharePlex参数文件中,不能简单的在数据库中更改,需要执行SharePlex提供的脚本进展,具体步骤如下。
对每个环境都单独列出了详细步骤。
a.源端stopcapture进程,观察SharePlex队列中数据都已应用到目标端;
b.shutdown源端和目标端的SharePlex;
c.执行prod/bin目录下的ora_chpwd命令来自动改变存储在数据库中和paramdb文件中的密码。
●生产环境:
dcdb02:
/oracle$ora_chpwd
Thisprogramallowsyoutochangethepasswordofthe
SharePlexuseraccountneededtorunOraclereplication.
Inresponsetoprompts,acarriagereturnwillchoosethe
defaultgiveninbrackets.Ifthereisnodefault,areplymustbeentered.
PleaseentertheSIDwhereSharePlexisinstalled[dl2]:
emptyresponse--tryagain:
splex
注意:
在此处不要使用本地的实例名,要输入TNS别名,然后回车;
InordertochangethepasswordfortheSharePlexuseraccount,
wemustconnecttothedatabaseasSYSTEM.
EnterpasswordfortheSYSTEMaccount,whichwillnotecho[MANAGER]:
emptyresponse--tryagain:
注意:
此处输入oracle数据库system的口令,但应当在口令的后面加上TNS_ALIAS,然后回车;
connecting--Thismaytakeafewseconds.
EnterthecurrentusernameforSharePlexuser:
emptyresponse--tryagain:
splex
EnternewpasswordforSharePlexuser:
emptyresponse--tryagain:
Re-enterpasswordforSharePlexuser:
emptyresponse--tryagain:
注意:
此处输入SharePlex用户的口令,但应当在口令的后面加上TNS_ALIAS,然后回车。
ChangingSharePlexparameterdatabase...
SharePlexpasswordchangepletedsuccessfully.
●管理环境:
dcadm:
/oracle$ora_chpwd
Thisprogramallowsyoutochangethepasswordofthe
SharePlexuseraccountneededtorunOraclereplication.
Inresponsetoprompts,acarriagereturnwillchoosethe
defaultgiveninbrackets.Ifthereisnodefault,areplymustbeentered.
PleaseentertheSIDwhereSharePlexisinstalled[adm]:
adm
emptyresponse--tryagain:
InordertochangethepasswordfortheSharePlexuseraccount,
wemustconnecttothedatabaseasSYSTEM.
EnterpasswordfortheSYSTEMaccount,whichwillnotecho[MANAGER]:
emptyresponse--tryagain:
注意:
此处输入oracle数据库system的口令,不需要后面加上TNS_ALIAS,然后回车;
connecting--Thismaytakeafewseconds.
EnterthecurrentusernameforSharePlexuser:
emptyresponse--tryagain:
splex
EnternewpasswordforSharePlexuser:
emptyresponse--tryagain:
Re-enterpasswordforSharePlexuser:
emptyresponse--tryagain:
注意:
此处输入SharePlex用户的口令,不需要在口令的后面加上TNS_ALIAS,然后回车。
ChangingSharePlexparameterdatabase...
SharePlexpasswordchangepletedsuccessfully.
d.启动源端和目标端的SharePlex;
e.源端startcapture进程,观察SharePlex是否复制正常。
2.8新增复制表
◆如果需要对新建的表进展复制,如此需要遵循以下步骤:
〔尽量在业务少的时候进展〕
〔1〕在目标系统数据库建立一样的表,然后在源系统的SharePlex控制台sp_ctrl下运行copyconfig命令将当前配置文件复制并生成一个新的配置文件。
例如,当前处在激活状态的配置文件名为filename,如此建立一个文件名为newname的配置文件;
sp_ctrl(sysA)>copyconfigfilenametonewname
〔2〕通过源系统的SharePlex控制台sp_ctrl运行editconfig命令编辑新建的配置文件newname
sp_ctrl(sysA)>editconfignewname
〔3〕在文件里为新建的表增加一行信息,这行信息包括该表在源系统中的表名、该表在目标服务其中的表名和路由信息。
例如,在源和目标服务器的APP模式下新建了名为a的表,如此应该在文件里增加如下的信息:
APP.aAPP.asysBo.TargetSID
〔4〕保存并退出配置文件;
〔5〕停止用户对新建表的任何操作,包括select,update,insert和delete等操作;
〔6〕在源系统的SharePlex控制台sp_ctrl下运行activateconfig命令激活修改后的新的配置文件,在激活的过程中原先处于激活状态的旧的配置文件会自动解除激活状态;
sp_ctrl(sysA)>activateconfignewnamelive
〔7〕此时,维护工作完成,用户可以对新建的表进展访问和操作。
◆如果需要对已有数据的表新增到链路中,如此需要遵循如下步骤:
〔1〕首先在目标端停止post
sp_ctrl(192.168.204.110:
2400)>stoppost
sp_ctrl(192.168.204.110:
2400)>show>>确认post已经停止
〔2〕在源端修改config,新增复制表
sp_ctrl(11rac1:
2400)>copyconfighr_scotttohr_scott_01>>复制一份正在使用的config
sp_ctrl(11rac1:
2400)>editconfighr_scott_01>>编辑复制的config,新增复制表
#sourcetablestargettablesroutingmap
hr.regionsscott.regions192.168.204.110:
regions01o.tarsp>>需要在host之后自定义队列名称
sp_ctrl(11rac1:
2400)>verifyconfighr_scott_01>>验证config
sp_ctrl(11rac1:
2400)>activateconfighr_scott_01>>激活config
注:
在激活配置文件之后,目标端除新增表之外的其他复制队列已经可以激活。
〔3〕查看v$transaction中start_time
SQL>selectstart_timefromv$transaction;
查看数据库事务开始时间,确认是否所有事务都在activateconfig时间之后,以保证所有事务都已捕获。
〔4〕expdp导出源端需要新增的表数据
[oracle11rac1expdp]$expdpsystem/111111directory=expdpdumpfile=regions.dmptables=hr.regionsflashback_s=5597451
〔5〕impdp在目标端导入新增的表数据,并禁用表上的约束以与触发器
[oracle11rac1expdp]$impdpsystem/111111directory=expdpdumpfile=regions.dmpremap_schema=hr:
scott>>如果用户一样,如此不需要使用remap_schema参数
〔6〕reconcile队列数据到之前选取的s
sp_ctrl(192.168.204.110:
2400)>qstatus
Name:
regions01(o.source-o.tarsp)(Postqueue)
Numberofmessages:
9(Age7404min;Size1mb)
Backlog(messages):
9(Age7404min)
Name:
jobs01(o.source-o.tarsp)(Postqueue)
Numberofmessages:
0(Age0min;Size1mb)
Backlog(messages):
0(Age0min)
sp_ctrl(192.168.204.110:
2400)>reconcilequeueregions01foro.source-o.tarsps5597452>>一般expdp导出的需要在reconcile时加1,使用RMAN基于s恢复的如此不需要加1
〔7〕启动新增加的表对应的post队列
sp_ctrl(192.168.204.110:
2400)>startpostqueueregions01
〔8〕查看数据同步情况以与链路情况。
2.9删除复制表
如果将要被删除的表在当前处在激活状态的SharePlex配置文件中,如此需要遵循以下步骤:
〔尽量在业务少的时候进展〕
〔1〕通过源系统的SharePlex控制台sp_ctrl运行copyconfig命令将当前配置文件复制并生成一个新的配置文件。
例如,当前处在激活状态的配置文件名为filename,如此建立一个文件名为newname的配置文件;
sp_ctrl(sysA)>copyconfigfilenametonewname
〔2〕通过源系统的SharePlex控制台sp_ctrl下运行editconfig命令编辑配置新建的配置文件
sp_ctrl(sysA)>editconfignewname
〔3〕在文件中将该含有该表的信息行删除。
〔4〕保存并退出配置文件;
〔5〕通过源系统的SharePlex控制台sp_ctrl运行activateconfig命令激活修改后的新的配置文件,在激活的过程中原先处于激活状态的旧的配置文件会自动解除激活状态;
sp_ctrl(sysA)>activateconfignewnamelive
〔6〕维护工作完成。
如果被重命名的表在当前处在激活状态的SharePlex配置文件中,如此需要遵循以下步骤:
〔尽量在业务少的时候进展〕
〔1〕停止用户对该表的任何操作,包括select,update,insert和delete等操作;
〔2〕在源系统和目标系统数据库中上重命名该表;
〔3〕通过源系统的SharePlex控制台sp_ctrl运行copyconfig命令将当前配置文件复制并生成一个新的配置文件。
例如,当前处在激活状态的配置文件名为filename,如此建立一个文件名为newname的配置文件;
sp_ctrl(sysA)>copyconfigfilenametonewname
〔4〕通过源系统的SharePlex控制台sp_ctrl运行editconfig命令编辑配置新建的配置文件
sp_ctrl(sysA)>editconfignewname
〔5〕在文件里修改被重命名表所在的行信息,将该表在源系统中的表名、该表在目标服务其中的表名该为重命名后的表名。
例如,在源和目标服务器的APP模式下的表a被重命名为表b,如此
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- SharePlex 实施 文档 以及 常见故障
![提示](https://static.bdocx.com/images/bang_tan.gif)