非交互中的 awk 遗漏了一些数据

Question

我在 shell 脚本中运行ning 一个 awk 命令，它破坏了数据文件。没有加载所有数据，每行末尾有一个换行符。

awk -v name="$filename" -v batch="$BATCHNAME" -F'|' 'BEGIN{OFS="|"}{=batch;print > (name".locked.concur")}' $filename.locked.concur

如果我运行将此作为命令，它会完美运行。

我刚刚发现我可以使用 fflush() 并且它似乎已经解决了这个问题。

所以现在我有：

awk -v name="$filename" -v batch="$BATCHNAME" -F'|' 'BEGIN{OFS="|"}{=batch;print > (name".locked.concur") fflush()}' $filename.locked.concur

我是不是在为灾难做准备？

此外，该文件已重命名为 $filename.locked.concur0 -- 我猜这个零是从 fflush 返回的退出代码？我如何摆脱这个 0？

完整代码：

for filename in `cat ${INFILEDIR}/file_list_concur`

do

rm -f $OHAP_DAT/bad/$filename.bad

##Create Batchname based on filename

BATCH_GROUP=`ls $filename.locked.concur |cut -d '_' -f 1`
BATCH_DATE=`ls $filename.locked.concur |cut -d '_' -f 2`
BATCHNAME=${BATCH_GROUP}_Concur_${BATCH_DATE}

echo 'Batch Date = '$BATCH_DATE
echo 'Batch Group = '$BATCH_GROUP
echo 'Batch Name = '$BATCHNAME
echo 'File Name = ' $filename

gawk -v name="$filename" -v batch="$BATCHNAME" -F'|' 'BEGIN{OFS="|"}{=batch;print > (name".locked.concur");}' $filename.locked.concur


##End Batchname

sqlldr $ORACLE_PW control=$XXOH_TOP/bin/XXOH_AP_CONCUR_IMPORT_CTL.ctl \
              data=$OHAP_DAT/in/$filename.locked.concur \
              log=$OHAP_DAT/log/$filename.log \
              bad=$OHAP_DAT/bad/$filename.bad \
                bindsize=512000 << end_of_sqlldr
end_of_sqlldr

if [ -f $OHAP_DAT/bad/$filename.bad ]
then
  echo \!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
  echo \!! 'date'
  echo \!! SQL*Loader bad file was found!!
  echo \!! Script $filename Failed - BAD FILE!
  echo \!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!

Answer 1

问题确实是您正在读取和写入同一个文件。这应该会更好：

gawk ... print > (name".locked.concur.tmp")}' $filename.locked.concur
mv -f $filename.locked.concur.tmp $filename.locked.concur

更好的是：

gawk ... print}' $filename.locked.concur > $filename.locked.concur.tmp
mv -f $filename.locked.concur.tmp $filename.locked.concur

非交互中的 awk 遗漏了一些数据

awk in non-interactive is leaving some data missing

linux

bash

shell

awk

fflush