harry's blog

1. Shell 运行

下面写一个简单的 shell 程序 bash.sh，使用 ./bash.sh 或者 bash bash.sh 来运行上述脚本，#! 这句放在第一行告诉终端用什么解释器来运行 shell 脚本，终端会输出 "Hello World !"，如果 ./train.sh 无法运行，可能是权限不够，在执行命令之前输入 chmod +x train.sh 即可

#!/bin/bash
echo "Hello World !"

2. Shell 变量

定义变量: your_name="harry"
使用变量: echo $your_name echo ${your_name} </span>your_name<span>
定义只读变量: your_name="harry" readonly your_name
删除变量: your_name="harry" unset your_name
单引号变量: 不能加变量和转义字符
双引号变量: 可以加变量和转义字符

3. 文件读写操作

向某个文件中写内容
- 清空 b，并将 aaa 写到 b 中: echo "aaa" > b.txt:
- 将 aaa 写到 b 末尾，自动加入换行符: echo "aaa" >> b.txt
- 清空 b 中的内容，并将 a 中的内容写入 b: cat a.txt > b.txt
- 将 a 中的内容写入 b 末尾，不加入换行符: cat a.txt >> b.txt
替换某个文件中的内容: sed -i 's/要被取代的字串/新的字串/g' filename

4.命令行传递参数

下面向 Shell 中传递三个参数 1,2,3，在命令行输入 ./train.sh 1 2 3，一般来说第 0 个参数不算参数，参数总量从 1 算起，123 一共三个参数

#!/bin/bash
echo "第零个参数：$0";
echo "第一个参数：$1";
echo "第二个参数为：$2";
echo "第三个参数为：$3";

# output
第零个参数：./train.sh
第一个参数：1
第二个参数为：2
第三个参数为：3

5. 基本分隔符

在 Shell 中，& 和 ; 都是命令分隔符，用于分隔多条命令

& 将一个命令放到后台运行，Shell 可以立即执行下一条命令：command1 &
; 将多条命令放到同一行中，依次执行：command1; command2; command3

6. set -e

set -e 命令表示如果任何语句的执行结果不是 true，脚本就会立即退出。这有助于防止错误积累或错误的结果传播，使得问题更难以追踪

#!/bin/bash
set -e
cd some_directory    # 如果这个目录不存在，脚本将在这里退出
rm *                 # 如果脚本没有在上一行退出，这一行将从some_directory删除所有文件

在上面的脚本中，如果 cd 命令失败（可能是因为目录不存在），那么 rm * 命令将不会执行。这可以防止误删除文件的可能性，set -e 可以帮助我们编写更安全、更健壮的脚本。

7. sh -c

sh -c "$(wget -O- https://github.com/deluan/zsh-in-docker/releases/download/v1.2.1/zsh-in-docker.sh)"

从GitHub仓库下载名为"zsh-in-docker"的脚本，并使用sh命令来执行这个脚本,-O-选项表示将下载的内容输出到标准输出（stdout）。下载zsh-in-docker.sh脚本并将其内容输出到标准输出
sh -c "$(command)": 这里的 sh -c 表示使用 sh 命令来执行 command，command 是一个字符串参数。$(command) 表示将command命令的输出作为参数传递给sh -c。所以这个命令的作用是执行wget命令下载的脚本

综上所述，这个命令会先下载zsh-in-docker.sh脚本，然后使用sh命令执行它，从而在系统中安装并配置Zsh。

常用深度学习参数

mmediting的shell脚本

#!/usr/bin/env bash

CONFIG=$1
GPUS=$2
PORT=${PORT:-29500}

PYTHONPATH="$(dirname $0)/..":$PYTHONPATH \
torchrun --nproc_per_node=$GPUS --master_port=$PORT \
    $(dirname "$0")/train.py $CONFIG --launcher pytorch ${@:3}

运行时执行CUDA_VISIBLE_DEVICES=0,1,2,3,4,5,6,7 ./tools/dist_train.sh configs/file_data.py 8

CUDA_VISIBLE_DEVICES=0,1,2,3,4,5,6,7: 环境变量，不算在参数内
./tools/dist_train.sh: 运行的脚本
configs/file_data.py: 第一个参数，配置文件
8: 第二个参数，代表GPU的数量

接下来我们看一下dist_train.sh里面的内容

CONFIG=$1: 配置文件变量，等于传入参数的 configs/file_data.py
GPUS=$2: GPU的数量，等于第二个传入参数8
PORT=${PORT:-29500}: 一种定义变量的方法，如果命令行不设置 PORT 的值，就是 29500，如果设置了按照设置的来，设置方法 PORT=2131 ./tools/dist_train.sh
PYTHONPATH="$(dirname $0)/..":$PYTHONPATH: 给python添加环境变量$(dirname $0)表示切换到train.sh所在目录，后面还有/..的原因是脚本是在tools文件夹下的，不是主目录。因此这句的意思是返回shell脚本所在目录的上一级目录，并将其加入到python环境中
${@:3}: 表示命令行中第三个及之后的参数，这里我们一共只有两个参数，所以他就是空

本文由 Yonghui Wang 创作，采用知识共享署名4.0 国际许可协议进行许可
本站文章除注明转载/出处外，均为本站原创或翻译，转载前请务必署名
最后编辑时间为: Dec 19, 2024 12:18 pm

linux shell 相关命令