遍歷文件夾shell

A. 基本linux命令

基本linux命令有哪些呢？

1、ls命令
就是 list 的縮寫，通過 ls 命令不僅可以查看 linux 文件夾包含的文件，而且可以查看文件許可權(包括目錄、文件夾、文件許可權)查看目錄信息等等。
常用參數搭配：
ls -a 列出目錄所有文件，包含以.開始的隱藏文件
ls -A 列出除.及..的其它文件
ls -r 反序排列
ls -t 以文件修改時間排序
ls -S 以文件大小排序
ls -h 以易讀大小顯示
ls -l 除了文件名之外，還將文件的許可權、所有者、文件大小等信息詳細列出來
實例：
(1) 按易讀方式按時間反序排序，並顯示文件詳細信息
ls -lhrt
(2) 按大小反序顯示文件詳細信息
ls -lrS
(3)列出當前目錄中所有以"t"開頭的目錄的詳細內容
ls -l t*
(4) 列出文件絕對路徑（不包含隱藏文件）
ls | sed "s:^:`pwd`/:"
(5) 列出文件絕對路徑（包含隱藏文件）
find $pwd -maxdepth 1 | xargs ls -ld
2、cd 命令
cd(changeDirectory) 命令語法：
cd [目錄名]
說明：切換當前目錄至 dirName。
實例：
（1）進入要目錄
cd /
（2）進入 "home" 目錄
cd ~
（3）進入上一次工作路徑
cd -
（4）把上個命令的參數作為cd參數使用。
cd !$
3、pwd 命令
pwd 命令用於查看當前工作目錄路徑。
實例：
（1）查看當前路徑
pwd
（2）查看軟鏈接的實際路徑
pwd -P
4、mkdir 命令
mkdir 命令用於創建文件夾。
可用選項：
-m: 對新建目錄設置存取許可權，也可以用 chmod 命令設置;
-p: 可以是一個路徑名稱。此時若路徑中的某些目錄尚不存在,加上此選項後，系統將自動建立好那些尚不在的目錄，即一次可以建立多個目錄。
實例：
（1）當前工作目錄下創建名為 t的文件夾
mkdir t
（2）在 tmp 目錄下創建路徑為 test/t1/t 的目錄，若不存在，則創建：
mkdir -p /tmp/test/t1/t
5、rm 命令
刪除一個目錄中的一個或多個文件或目錄，如果沒有使用 -r 選項，則 rm 不會刪除目錄。如果使用 rm 來刪除文件，通常仍可以將該文件恢復原狀。
rm [選項] 文件…
實例：
（1）刪除任何 .log 文件，刪除前逐一詢問確認：
rm -i *.log
（2）刪除 test 子目錄及子目錄中所有檔案刪除，並且不用一一確認：
rm -rf test
（3）刪除以 -f 開頭的文件
rm -- -f*
6、rmdir 命令
從一個目錄中刪除一個或多個子目錄項，刪除某目錄時也必須具有對其父目錄的寫許可權。
注意：不能刪除非空目錄
實例：
（1）當 parent 子目錄被刪除後使它也成為空目錄的話，則順便一並刪除：
rmdir -p parent/child/child11
7、mv 命令
移動文件或修改文件名，根據第二參數類型（如目錄，則移動文件；如為文件則重命令該文件）。
當第二個參數為目錄時，第一個參數可以是多個以空格分隔的文件或目錄，然後移動第一個參數指定的多個文件到第二個參數指定的目錄中。
實例：
（1）將文件 test.log 重命名為 test1.txt
mv test.log test1.txt
（2）將文件 log1.txt,log2.txt,log3.txt 移動到根的 test3 目錄中
mv llog1.txt log2.txt log3.txt /test3
（3）將文件 file1 改名為 file2，如果 file2 已經存在，則詢問是否覆蓋
mv -i log1.txt log2.txt
（4）移動當前文件夾下的所有文件到上一級目錄
mv * ../
8、cp 命令
將源文件復制至目標文件，或將多個源文件復制至目標目錄。
注意：命令行復制，如果目標文件已經存在會提示是否覆蓋，而在 shell 腳本中，如果不加 -i 參數，則不會提示，而是直接覆蓋！
-i 提示
-r 復制目錄及目錄內所有項目
-a 復制的文件與原文件時間一樣
實例：
（1）復制 a.txt 到 test 目錄下，保持原文件時間，如果原文件存在提示是否覆蓋。
cp -ai a.txt test
（2）為 a.txt 建議一個鏈接（快捷方式）
cp -s a.txt link_a.txt
9、cat 命令
cat 主要有三大功能：
1.一次顯示整個文件:
cat filename
2.從鍵盤創建一個文件:
cat > filename
只能創建新文件，不能編輯已有文件。
3.將幾個文件合並為一個文件:
cat file1 file2 > file
-b 對非空輸出行號
-n 輸出所有行號
實例：
（1）把 log2012.log 的文件內容加上行號後輸入 log2013.log 這個文件里
cat -n log2012.log log2013.log
（2）把 log2012.log 和 log2013.log 的文件內容加上行號（空白行不加）之後將內容附加到 log.log 里
cat -b log2012.log log2013.log log.log
（3）使用 here doc 生成新文件
cat >log.txt <<EOF
>Hello
>World
>PWD=$(pwd)
>EOF
ls -l log.txt
cat log.txt
Hello
World
PWD=/opt/soft/test
（4）反向列示
tac log.txt
PWD=/opt/soft/test
World
Hello
10、more 命令
功能類似於 cat, more 會以一頁一頁的顯示方便使用者逐頁閱讀，而最基本的指令就是按空白鍵（space）就往下一頁顯示，按 b 鍵就會往回（back）一頁顯示。
命令參數：
+n 從笫 n 行開始顯示
-n 定義屏幕大小為n行
+/pattern 在每個檔案顯示前搜尋該字串（pattern），然後從該字串前兩行之後開始顯示
-c 從頂部清屏，然後顯示
-d 提示「Press space to continue，』q』 to quit（按空格鍵繼續，按q鍵退出）」，禁用響鈴功能
-l 忽略Ctrl+l（換頁）字元
-p 通過清除窗口而不是滾屏來對文件進行換頁，與-c選項相似
-s 把連續的多個空行顯示為一行
-u 把文件內容中的下畫線去掉
常用操作命令：
Enter 向下 n 行，需要定義。默認為 1 行
Ctrl+F 向下滾動一屏
空格鍵 向下滾動一屏
Ctrl+B 返回上一屏
= 輸出當前行的行號
:f 輸出文件名和當前行的行號
V 調用vi編輯器
!命令 調用Shell，並執行命令
q 退出more
實例：
（1）顯示文件中從第3行起的內容
more +3 text.txt
（2）在所列出文件目錄詳細信息，藉助管道使每次顯示 5 行
ls -l | more -5
按空格顯示下 5 行。
11、less 命令
less 與 more 類似，但使用 less 可以隨意瀏覽文件，而 more 僅能向前移動，卻不能向後移動，而且 less 在查看之前不會載入整個文件。
常用命令參數：
-i 忽略搜索時的大小寫
-N 顯示每行的行號
-o <文件名> 將less 輸出的內容在指定文件中保存起來
-s 顯示連續空行為一行
/字元串：向下搜索「字元串」的功能
?字元串：向上搜索「字元串」的功能
n：重復前一個搜索（與 / 或 ? 有關）
N：反向重復前一個搜索（與 / 或 ? 有關）
-x <數字> 將「tab」鍵顯示為規定的數字空格
b 向後翻一頁
d 向後翻半頁
h 顯示幫助界面
Q 退出less 命令
u 向前滾動半頁
y 向前滾動一行
空格鍵 滾動一行
回車鍵 滾動一頁
[pagedown]： 向下翻動一頁
[pageup]： 向上翻動一頁
實例：
（1）ps 查看進程信息並通過 less 分頁顯示
ps -aux | less -N
（2）查看多個文件
less 1.log 2.log
可以使用 n 查看下一個，使用 p 查看前一個。
12、head 命令
head 用來顯示檔案的開頭至標准輸出中，默認 head 命令列印其相應文件的開頭 10 行。
常用參數：
-n<行數> 顯示的行數（行數為復數表示從最後向前數）
實例：
（1）顯示 1.log 文件中前 20 行
head 1.log -n 20
（2）顯示 1.log 文件前 20 位元組
head -c 20 log2014.log
（3）顯示 t.log最後 10 行
head -n -10 t.log
13、tail 命令
用於顯示指定文件末尾內容，不指定文件時，作為輸入信息進行處理。常用查看日誌文件。
常用參數：
-f 循環讀取（常用於查看遞增的日誌文件）
-n<行數> 顯示行數（從後向前）
（1）循環讀取逐漸增加的文件內容
ping 127.0.0.1 > ping.log &
後台運行：可使用 jobs -l 查看，也可使用 fg 將其移到前台運行。
tail -f ping.log
（查看日誌）
14、which 命令
在 linux 要查找某個文件，但不知道放在哪裡了，可以使用下面的一些命令來搜索：
which 查看可執行文件的位置。
whereis 查看文件的位置。
locate 配合資料庫查看文件位置。
find 實際搜尋硬碟查詢文件名稱。
which 是在 PATH 就是指定的路徑中，搜索某個系統命令的位置，並返回第一個搜索結果。使用 which 命令，就可以看到某個系統命令是否存在，以及執行的到底是哪一個位置的命令。
常用參數：
-n 指定文件名長度，指定的長度必須大於或等於所有文件中最長的文件名。
實例：
（1）查看 ls 命令是否存在，執行哪個
which ls
（2）查看 which
which which
（3）查看 cd
which cd（顯示不存在，因為 cd 是內建命令，而 which 查找顯示是 PATH 中的命令）
查看當前 PATH 配置：
echo $PATH
或使用 env 查看所有環境變數及對應值
15、whereis 命令
whereis 命令只能用於程序名的搜索，而且只搜索二進制文件（參數-b）、man說明文件（參數-m）和源代碼文件（參數-s）。如果省略參數，則返回所有信息。whereis 及 locate 都是基於系統內建的資料庫進行搜索，因此效率很高，而find則是遍歷硬碟查找文件。
常用參數：
-b 定位可執行文件。
-m 定位幫助文件。
-s 定位源代碼文件。
-u 搜索默認路徑下除可執行文件、源代碼文件、幫助文件以外的其它文件。
實例：
（1）查找 locate 程序相關文件
whereis locate
（2）查找 locate 的源碼文件
whereis -s locate
（3）查找 lcoate 的幫助文件
whereis -m locate

B. linux shell 遍歷文件夾 並將結果保存 到變數

#!/bin/bash
(($#<1))&&echo"paramiszero!"&&exit1
[!-d$1]&&echo"$1notpath"&&exit1
dir=$1
dir_p="$dirDirectory:"
cd$dir
dir=`pwd`
foriin`ls$dir`
do
if[-d$i];then
/tmp/sh/dir_file$i#我的腳本文件在/tmp/sh中，需要改一下這里
else
dir_p="$dir_pFile$i"
fi
done
cd..
echo$dir_p

實驗結果:

[root@localhost sh]# ./dir_file /tmp/python/

python_2 Directory : File 1.log File 2.log

python_3 Directory : File 3.log

/tmp/python/ Directory : File p File t.py File y.py

這樣應該可以吧，試試看

C. 如何用shell腳本遍歷指定目錄下的文件，並按後綴名分類

腳本1:
#!/bin/bash
#
#
cd /tmp/script
cfile=` find -name '*.c' `
hfile=` find -name '*.h' `
for fc in $cfile
do
cfname=`basename -s .c $fc`
cat $fc >/tmp/scripttest/$cfname.txt
done
for fh in $hfile
do
cp $fh /tmp/scripttest
done

D. 如何在linux中使用shell腳本遍歷指定目錄的文件，將創建時間大於指定時間的文件，復制到指定目錄下。

大於指定時間？最簡單的就是直接find裡面指定吧。例如，查找當前目錄及其子目錄所有mtime大於1天的文件：
find
/path
-type
f
-mtime
+1
即可，/path
可以換成其他路徑，-mtime
+1
表示時間大於1天。-1的話表示小於一天也就是1天之內的。

E. linux shell遍歷當前文件夾中的txt文件並處理生成新的文件

先以a.txt為例：

awk-vRS=""'{
n=split($0,a,"《[^》]+》");
for(i=2;i<n;i+=2)
print"《keywords》"a[i]"《/keywords》"
}'a.txt>>./newfile/a.txt

這樣就行了。

為了可讀性，我將一條awk語句寫成了多行。

實際測試結果如下：

解說：

RS=""

將awk的記錄分隔符設置為空（默認是換行符），即將整個a.txt文本看做一條記錄。

n = split($0,a,"《[^》]+》");

以正則"《[^》]+》"匹配的內容作為分隔符，對文本內容進行分割並將分割結果存入數組a，分割出的數目（數組大小）即為split函數的返回值n。這里暫且不對該正則做過多解釋，否則喧賓奪主，有需要請追問，我再補充。

for(i=2;i<n;i+=2)
print "《keywords》"a[i]"《/keywords》"

列印數組下標為偶數的元素並在首尾分別加上關鍵字標記以還原。數組下標從1開始。

其他文件可作相同處理。如果文件較多，你可以搞個循環去做。這個應該不難。

F. Linux Shell：Shell循環語句

摘要： Linux ， Shell

Shell中常用循環有 for ， while

for循環只能用於 固定次數 的循環，因此不能無限循環和用於一些在後台守護進程一直運行的程序，語法語句如下

也可以寫成一行，用 ； 分隔

取值列表內元素以空格隔開，如果元素帶有空格則用引號包裹起來，例子如下

輸出如下，可見循環到最後退出循環，引用變數依舊是最後一個取值列表元素

一行的寫法

Shell的for循環也可以採用C語言的寫法，注意是 雙括弧 ，用 分號； 間隔

一個簡單例子

while循環語句結合條件測試使用，語法如下

舉一個例子

在循環中使用條件測試實現復雜的邏輯，例如

也可以使用&&，||一行完成，省去if，fi

Shell的continue，break語句和Python一樣，例子如下
break語句下輸出4

continue語句下輸出4 6 7 8 9 10

常見結合使用的循環體有 序列 ， 數組 ， 命令行傳參 ， 文件目錄和文件

序列通過 seq 命令或者 {begin..end..step} 符號進行定義：

結合for循環使用案例

在Shell中使用小括弧 () 定義數組，數組遍歷使用 [@] 符號，防止元素有空格用雙引號包起來，，例子如下

命令行傳參遍歷使用固定符號 $@ ，如果參數中有空格，用雙引號括起來，例子如下

文件遍歷使用 ls 命令，可以指定目錄，以及通配符匹配

一個雙重循環實現，注意 expr表達式中乘號要加轉移符

（2）將某目錄下大小大於閾值的文件移動到另一個文件
遍歷循環一個目錄，使用awk語法獲得文件大小，將100m以上的文件移動到另一個文件夾

（2）指定開始日期和結束日期完成一個跑批任務
指定一個開始時間和結束時間，while從開始日期一直自增到結束日期循環結束，通過 date -d 񟭕-01-01 1day' +%Y-%m-%d 自增一天