it-swarm.cn

什么时候使用附加的文件描述符?

我知道您可以创建文件描述符并将输出重定向到它。例如.

exec 3<> /tmp/foo # open fd 3.
echo a >&3 # write to it
exec 3>&- # close fd 3.

但是您可以在没有文件描述符的情况下执行相同的操作:

FILE=/tmp/foo
echo a > "$FILE"

我正在寻找一个很好的示例,说明何时需要使用附加的文件描述符。

80
dogbane

大多数命令具有一个输入通道(标准输入,文件描述符0)和一个输出通道(标准输出,文件描述符1),或者对它们自己打开的几个文件进行操作(因此您传递了一个文件名)。 (这是标准错误(fd 2)的补充,该错误通常会一直过滤到用户。)但是有时使用一条命令充当来自多个源或多个目标的过滤器的命令有时会很方便。例如,这是一个简单的脚本,它将文件中的奇数行与偶数行分开

while IFS= read -r line; do
  printf '%s\n' "$line"
  if IFS= read -r line; then printf '%s\n' "$line" >&3; fi
done >odd.txt 3>even.txt

现在,假设您要对奇数行和偶数行应用不同的过滤器(但不要将它们放回去,那将是一个不同的问题,对于Shell来说通常是不可行的)。在命令行管理程序中,您只能将命令的标准输出传递给另一个命令;要通过管道传输另一个文件描述符,您需要先将其重定向到fd 1。

{ while … done | odd-filter >filtered-odd.txt; } 3>&1 | even-filter >filtered-even.txt

另一个更简单的用例是 过滤命令的错误输出

exec M>&N将文件描述符的其余部分重定向到另一个文件描述符(或直到另一个这样的命令再次更改了文件描述符)。 exec M>&Nsomecommand M>&N之间在功能上存在一些重叠。 exec表单更强大,因为它不必嵌套:

exec 8<&0 9>&1
exec >output12
command1
exec <input23
command2
exec >&9
command3
exec <&8

其他可能感兴趣的示例:

还有更多示例:

附言这是一个令人惊讶的问题,来自 使用fd 3重定向的网站上最受欢迎的文章

54

这是使用额外的FD作为bash脚本聊天控制的示例:

#!/bin/bash

log() {
    echo $* >&3
}
info() {
    echo $* >&4
}
err() {
    echo $* >&2
}
debug() {
    echo $* >&5
}

VERBOSE=1

while [[ $# -gt 0 ]]; do
    ARG=$1
    shift
    case $ARG in
        "-vv")
            VERBOSE=3
        ;;
        "-v")
            VERBOSE=2
        ;;
        "-q")
            VERBOSE=0
        ;;
        # More flags
        *)
        echo -n
        # Linear args
        ;;
    esac
done

for i in 1 2 3; do
    fd=$(expr 2 + $i)
    if [[ $VERBOSE -ge $i ]]; then
        eval "exec $fd>&1"
    else
        eval "exec $fd> /dev/null"
    fi
done

err "This will _always_ show up."
log "This is normally displayed, but can be prevented with -q"
info "This will only show up if -v is passed"
debug "This will show up for -vv"
14
Fordi

在命名管道(fifos)的上下文中,使用其他文件描述符可以启用非阻塞管道行为。

(
rm -f fifo
mkfifo fifo
exec 3<fifo   # open fifo for reading
trap "exit" 1 2 3 15
exec cat fifo | nl
) &
bpid=$!

(
exec 3>fifo  # open fifo for writing
trap "exit" 1 2 3 15
while true;
do
    echo "blah" > fifo
done
)
#kill -TERM $bpid

请参阅: 在脚本中过早关闭了命名管道?

8
chad

当您想在变量中捕获标准输出但仍要写出到屏幕时(例如在bash脚本用户界面中),额外的文件描述符非常有用。

arg1 string to echo 
arg2 flag 0,1 print or not print to 3rd fd stdout descriptor   
function ecko3 {  
if [ "$2" -eq 1 ]; then 
    exec 3>$(tty) 
    echo -en "$1" | tee >(cat - >&3)
    exec 3>&- 
else 
    echo -en "$1"  
fi 
}
6

在使用其他文件描述符似乎合适的情况下(在Bash中),这是另一种情况:

命令行参数的Shell脚本密码安全性

env -i bash --norc   # clean up environment
set +o history
read -s -p "Enter your password: " passwd
exec 3<<<"$passwd"
mycommand <&3  # cat /dev/stdin in mycommand
3
bernard

示例:使用flock强制脚本以文件锁顺序运行

一个示例是利用文件锁定来强制脚本在系统范围内串行运行。如果您不希望两个相同类型的脚本在同一文件上运行,这将很有用。否则,这两个脚本将相互干扰,并可能破坏数据。

#exit if any command returns a non-zero exit code (like flock when it fails to lock)
set -e

#open file descriptor 3 for writing
exec 3> /tmp/file.lock

#create an exclusive lock on the file using file descriptor 3
#exit if lock could not be obtained
flock -n 3

#execute serial code

#remove the file while the lock is still obtained
rm -f /tmp/file.lock

#close the open file handle which releases the file lock and disk space
exec 3>&-

通过定义锁定和解锁功能使用羊群

您也可以将此锁定/解锁逻辑包装到可重用的函数中。以下 trap Shell内置 将在脚本退出时(错误或成功)自动释放文件锁定。 trap帮助清理文件锁。路径 /tmp/file.lock应该是硬编码的路径,以便多个脚本可以尝试将其锁定。

# obtain a file lock and automatically unlock it when the script exits
function lock() {
  exec 3> /tmp/file.lock
  flock -n 3 && trap unlock EXIT
}

# release the file lock so another program can obtain the lock
function unlock() {
  # only delete if the file descriptor 3 is open
  if { >&3 ; } &> /dev/null; then
    rm -f /tmp/file.lock
  fi
  #close the file handle which releases the file lock
  exec 3>&-
}

上面的unlock逻辑是在释放锁定之前删除文件。这样,它将清除锁定文件。由于该文件已删除,因此该程序的另一个实例能够获得文件锁定。

在脚本中使用锁定和解锁功能

您可以像下面的示例一样在脚本中使用它。

#exit if any command returns a non-zero exit code (like flock when it fails to lock)
set -e

#try to lock (else exit because of non-zero exit code)
lock

#system-wide serial locked code

unlock

#non-serial code

如果您希望代码等待直到能够锁定,则可以调整脚本,如下所示:

set -e

#wait for lock to be successfully obtained
while ! lock 2> /dev/null; do
  sleep .1
done

#system-wide serial locked code

unlock

#non-serial code
1
Sam Gleske

作为一个具体的例子,我只是编写了一个脚本,该脚本需要来自子命令的时序信息。使用额外的文件描述符使我能够捕获time命令的stderr,而不会中断子命令的stdout或stderr。

(time ls -9 2>&3) 3>&2 2> time.txt

这是将ls的stderr指向fd 3,将fd 3指向脚本的stderr,并将time的stderr指向文件。运行脚本时,其stdout和stderr与子命令相同,可以照常重定向。仅time的输出重定向到文件。

$ echo '(time ls my-example-script.sh missing-file 2>&3) 3>&2 2> time.txt' > my-example-script.sh
$ chmod +x my-example-script.sh 
$ ./my-example-script.sh 
ls: missing-file: No such file or directory
my-example-script.sh
$ ./my-example-script.sh > /dev/null
ls: missing-file: No such file or directory
$ ./my-example-script.sh 2> /dev/null
my-example-script.sh
$ cat time.txt

real    0m0.002s
user    0m0.001s
sys 0m0.001s
1
Ben Blank