datastagedads - 图文-

发布时间 : 星期五 文章datastagedads - 图文- 更新完毕开始阅读

工作总结 2007

解决方法:

用当前存在的帐号重新编译etlmain创建的相关存储过程(所谓编译其实就是删除重建),然后再调用就没有问题了。建议在创建存储过程的时候用高级别帐号去创建,例如root帐号,因为存储过程的属主帐号一旦被删除,那么存储过程也就需要重建了! 3.22 DS发送邮件的配置问题

DS中发送邮件需要做哪些配置? 答:

DataStage发送邮件的机制在windows平台和Unix平台是不相同的。

在windows平台,datastage内置了一个小程序叫dssmtpmail.exe,通过此程序可以发送邮件。 在UNIX平台DataStage通过调用/usr/lib/sendmail来发送邮件。

解决方法:需将SGM的SMTP服务器地址加入ETL的服务器的SMTP地址列表中

例如,在AIX环境中的配置如下: DataStage 发邮件设置

/etc/mail/ sendmail.cf 参数

Individual 2007-10 25 /

65

工作总结 2007 DSsmtp:[210.75.71.180] dssendmail_template.txt * On UNIX to run sendmail, the template looks like this (doesn't require a section): #! /bin/sh

/usr/lib/sendmail -t <

Subject: %subject% Server: %server% %body%

3.23 随机错误问题

DataStage Sequence程序随机错误,错误是找不到/tmp目录下的该JOB的临时文件,重新编译后正常Run,错误描述:

I_Tr_EDS_TM_DOL_BRAND.#0.CNTR_WEdsTmDolBrandLdf_ins.LK05-Input.LK01: ds_ipcopen() - Error

in

open(/tmp/ade.SGMEDW.I_Tr_EDS_TM_DOL_BRAND.#0.CNTR_WEdsTmDolBrandLdf_ins.LK05-Input) - No such file or directory

解决方法:

目前修改了以下参数,连续两天未发现随机错误:

1.APT_MONITOR_SIZE to 100000 and APT_MONITOR_TIME to 5 2.可能是因为在Parallel Job中使用了Server Share Container导致的, 打开Project Property

确保已经选择Enable row buffer,并且选择Inter process

最终确认的原因:

1.Default.app设置的并行节点数为4,那对于一个Stage就会起4个进程,stage过多会导致资源耗尽 解决方案:

1.尽量降低并发度

2.首先采用1个节点运行,待稳定后逐步增加节点数,也可对复杂JOB进行 3.24 DS中的日期问题

在Datastage7.5.1A中,日期抽取问题,例如,时间问题,'2006-04-12'等日期在datastage中变为 '2006-04-11' 答:

问题原因:

dsenv 的TZ设置不能使用别名BEIST,缺省值为GMT0这表示格林标准时间 解决方法:

Datastage dsenv参数TZ=\GMT-8表示的就是北京时间

Individual 2007-10 26 /

65

工作总结 2007 3.25 DS连接oracle问题 DATASTAGE +oracle 10g 客户端连接windows平台下oracle 10G数据库失败,报plug_in初始化失败。 答:

原因:未将ETL账户加入到DBA权限组中。加入以后就解决了。

3.26 在Sequence File Stage中的空值处理问题

在使用Sequence File Stage, ,给CHAR型等固定长度的字段赋空值时会报错 。

例如在往一个可以为NULL并且类型是CHAR(20)的字段FI_CARLINE 中写NULL数据时会报如下信息:

Sequential_File_8: When checking operator: When validating export schema: At field \但是如果是varchar类型的就没有问题。 解决方法:

在DataStage Administrator中的这个Project的User Defined中添加一个参数APT_IMPEXP_ALLOW_ZERO_LENGTH_FIXED_NULL 类型为string并且值设为0 就可以了。【注意:是数字中的0】

3.27 在DS中使用Oracle Enterprise Stage必须的权限 Oracle Enterprise Stage必须有以下权限才能使用 Have SELECT privilege on: ? DBA_EXTENTS ? DBA_DATA_FILES

? DBA_TAB_PARTITONS ? DBA_TAB_SUBPARTITONS ? DBA_OBJECTS

? ALL_PART_INDEXES ? ALL_PART_TABLES ? ALL_INDEXES

? SYS.GV_$INSTANCE (Only if Oracle Parallel Server is used)

3.28 DS中去除‘回车符’的问题以及从char类型转变成整型的方法

在datastage中,从char类型变成整型用可以stringToDecimal这个函数,不能用AsInteger,更不能直接转 。

在datastage中和SQL server中‘回车’是用char(10)来表示的,在ORACLE中是用CHR(10)来表示的。

在datastage中要把字段中的回车替代掉就用 Ereplace(LK01.col_num,CHAR(10),' ') replace(replace(deliverer_phone,CHR(13),''),CHR(10),'') deliverer_phone 其中deliverer_phone是表示需要处理的字段,注意后面要用个别名!

Individual 2007-10 27 /

65

工作总结 2007 3.29 从后台看JOB列表的方法 怎样查询一个工程里的JOB列表? 方法一: cd $DSHOME

cd bin

dsjob -ljobs 工程名(SGMEDS01) | grep ds > 要存放的文件目录(/SGMEDWETL/tmp/tangning.txt) 方法二: uvsh

LOGTO SGMEDS01

SELECT NAME FROM DS_JOBS WHERE NAME LIKE '%SAP%' 方法三:

进入存放JOB的位置,要产看某个project的JOB信息就进到相应的project下面

用dssh“SELECT * FROM DS_JOBS WHERE NAME=’ I_Tr_TRC_TI_TRC_ASC’” 或者是uvsh “SELECT * FROM DS_JOBS WHERE NAME=’ I_Tr_TRC_TI_TRC_ASC’” 都可以实现查询。如下图所示:

3.30 Datastage和数据库的连接方法 Datastage和数据库有两种方法连接:

一种是通过ODBC连接,这个可以查看.odbc.ini文件里查看

另一种方法是通过客户端连接,就象是oracle的tnsnames.ora文件还有db2的directory一样。 从后台查看服务器配置了哪些db2客户端用db2 list db directory 3.31 在datastage中使用环境变量的问题

在datastage中如果用到了环境变量的话,那么这个环境变量一定也要在/$dshome/dsenv 中配置一下,然后重启datastage服务器以后 才会生效!

例如:在dsadm用户下的 .profile 文件中配置了一个环境变量 export ETLPATH=/SGMEDWETL/dsdata/projects 那么同样我们也要在/$dshome/dsenv 中配置一下 export ETLPATH=/SGMEDWETL/dsdata/projects

Individual 2007-10 28 /

65

联系合同范文客服:xxxxx#qq.com(#替换为@)