Shell编程，避免使用临时文件

我经常编写遵循相同模式的KSH Shell脚本：

• （1）从一个或多个命令检索输出
• （2）使用grep | cut | awk | sed格式化并打印到屏幕或文件中

为了做到这一点，我经常将（1）的输出存储在一个临时文件中，然后对该文件进行（2）的格式化。

以该代码为例：

TMPFILE=file.tmp

# If tmpfile exists rm it.
[ -f $TMPFILE ] && rm -f $TMPFILE

for SERVICE in $(myfunc); do
    getInfo $SERVICE > $TMPFILE # Store raw output in the TMPFILE

    # I retrieve the relevant data from the TMPFILE
    SERV_NAME=$(head -1 $TMPFILE | sed -e 's/ $//')
    SERV_HOSTNAME=$(grep HOSTNAME $TMPFILE | cut -d "=" -f2)
    SERV_ARGS=$(grep Arguments $TMPFILE | cut -d ":" -f2)

    print $SERV_NAME $SEP $SERV_HOSTNAME $SEP $SERV_ARGS
    rm -f $TMPFILE #rm the TMPFILE in vue of next iteration
done

有没有办法使用管道，重定向和其他方法避免每次都将文件写入磁盘？

如果有帮助，我正在使用ksh版本M-11 / 16 / 88i

您的代码对我来说似乎是使用tempfiles的完全合理的示例。我会留下：坚持这种方法。真正需要更改的唯一一件事就是创建临时文件的方式。使用类似

 TMP=$(tempfile)

要么

 TMP=$(mktemp)

或者至少

 TMP=/tmp/myscript_$$

这样，您就不会轻易预测名称（安全性）并且避免同时运行脚本的多个实例之间的冲突。

您可以使用一个变量：

info="$(getInfo $SERVICE)"
SERV_NAME="$(head -1 $TMPFILE <<<"$info" | sed -e 's/ $//')"
...

来自man ksh：

<<<word       A  short  form of here document in which word becomes the
              contents of the here-document after any parameter  expan-
              sion,  command  substitution, and arithmetic substitution
              occur.

优势包括：

• 启用并行执行。
• 以我的经验，这比临时文件要快很多。除非您有太多数据最终要交换，否则它应该快几个数量级（仅不包括HD高速缓存缓冲区，对于少量数据量来说可能差不多一样快）。
• 其他进程或用户无法破坏您的数据。

您有两种选择：

1. 您getInfo只需检索一次数据（在示例中使用），然后将其存储在文件中。

2. 您每次都获取数据，而不是将其存储在本地，即getInfo每次都调用

我看不到创建临时文件以避免重新处理/重新获取的问题。

如果您担心将临时文件留在某个地方，可以随时使用trap以确保将其删除，以防脚本被杀死/中断。

trap "rm -f $TMPFILE" EXIT HUP INT QUIT TERM

并用于mktemp为您的临时文件创建唯一的文件名。

不用生成文件，而是构造外壳程序分配语句并评估该输出。

for SERVICE in $(myfunc); do
    eval $(getInfo $SERVICE |
               sed -n -e '1/\(.*\) *$/SERV_NAME="\1"/p' \
                   -e '/HOSTNAME/s/^[^=]*=\([^=]*\).*/SERV_HOSTNAME="\1"/p' \
                   -e '/Arguments/^[^:]*:\([^:]*\).*/SERV_ARGS="\1"/p')
    print $SERV_NAME $SEP $SERV_HOSTNAME $SED $SERV_ARGS
done

或者，如果您只想打印信息：

for SERVICE in $(myfunc); do
    getInfo $SERVICE | awk -vsep="$SEP" '
        BEGIN{OFS=sep}
        NR == 1 { sub(/ *$/,""); SERV_NAME=$0 }
        /HOSTNAME/ { split($0, HOST, /=/; SERV_HOSTNAME=HOST[2]; }
        /Arguments/ { split($0, ARGS, /:/; SERV_ARGS }
        END { print SERV_NAME, SERV_HOSTNAME, SERV_ARGS }'
done