批量数据文件用sqlldr导数据到oracle中

前端之家收集整理的这篇文章主要介绍了批量数据文件用sqlldr导数据到oracle中前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。

使用sqlload导文本数据到oracle中想必很多人多使用过,但是倘若有几百或者几千个数据文本,或者实时有文本数据产生。这种场景如何批量导入oracle呢,下面就来讲解下我处理的方式。

1.shell脚本LoadData.sh如下

  1. #!/bin/bash
  2. data_dir=/home/bea/datasource/warn-log/dayflow#文本数据目录
  3. data_dir_bak=/home/bea/datasource/warn-log/dayflow_bak
  4. shell_dir=/home/bea/script
  5. while[1]
  6. do
  7. cd$data_dir
  8. if[`pwd`==$data_dir]
  9. then
  10. filelist=`ls-rt|grepdayflow.log_.`#数据文本文件名匹配
  11. fi
  12.  
  13. #echo$filelist
  14. cd$shell_dir
  15. if[`pwd`==$shell_dir]
  16. then
  17. forfilein$filelist
  18. do
  19. date=`date"+%Y%m%d%H:%M:%S"`
  20. exportLoadFileName=$data_dir"/"$file#这个地方很重要,要加载变量到环境中
  21. echo"Timeis$date,开始导$LoadFileName数据"
  22. sqlldruser_1/123456@213_dbcontrol=dayflow.log.ctlBAD=dayflow.log.bad
  23. echo"Timeis$date,$LoadFileName数据导入完毕"
  24.  
  25. echo"开始备份文件$file"
  26. mv$LoadFileName$data_dir_bak
  27. echo"$file备份完毕"
  28. done
  29. fi
  30. done

这个地方最应该要注意的是

  1. exportLoadFileName=$data_dir"/"$file

这里将LoadFileName (导入oracle 的文本,绝对路径)这个变量 export到linux环境中,这样sqlload的控制文件就可以读到这个变量并进行导入

2.sqlldr控制文本dayflow.log.ctl

  1. loaddata
  2. CHARACTERSETAL32UTF8
  3. infile'$LoadFileName'
  4. APPENDintotableuser_1.BIL_FLUX_HIGH_CUR
  5. fieldsterminatedby'|'
  6. trailingnullcols
  7. (ACCS_NBR"TRIM(:ACCS_NBR)",DATE_ID"TRIM(:DATE_ID)",TOTAL_FLUX"TRIM(:TOTAL_FLUX)",sys_date"sysdate")

请注意infile '$LoadFileName',这里就是shell中 刚才export的变量,通过这种方式就可以以变量的形式传入文件名,那么批量导入也就是一个循环的操作。

猜你在找的Oracle相关文章