洗牌問題：洗一副撲克，有什么好辦法？既能洗得均勻，又能洗得快？即相對于一個文件來說怎樣高效率的實現亂序排列？
ChinaUnix 確實是 Shell 高手云集的地方，只要你想得到的問題，到那里基本上都能找到答案。r2007 給出了一個取巧的方法，利用 Shell 的 $RANDOM 變量給原文件的每一行加上隨機的行號然后根據這個隨機行號進行排序，再把臨時加上去的行號給過濾掉，這樣操作之后得到的新文件就相當于被隨機“洗”了一次：
另外一篇來自蘇蓉蓉的用 awk 來實現洗牌效果的隨機文件排序代碼分析（原貼在這里，以及對此帖的一個后續討論，如果你沒有登錄帳號的話可以到這里查看精華區文章）則寫的更為詳細：
--------------------------------------------------------------------
關于洗牌問題，其實已經有了一個很好的shell解法，這里另外給三個基于AWK的方法，有錯誤之處還請不吝指出。
方法一：窮舉
類似于窮舉法，構造一個散列來記錄已經打印行出現行的次數，如果出現次數多于一次則不進行處理，這樣可以防止重復，但缺點是加大了系統的開銷。
基于數組下標變換的辦法，即用數組儲存每行的內容，通過數組下標的變換交換數組的內容，效率好于方法一。
BEGIN{
srand();
}
{
b[NR]=$0;
}
END{
C(b,NR);
for(x in b)
{
print b[x];
}}
function C(arr,len,i,j,t,x){
for(x in arr)
{
i=int(len*rand())+1;
j=int(len*rand())+1;
t=arr[i];
arr[i]=arr[j];
arr[j]=t;
}
}
三個方法中最好的。
利用AWK中散列的特性(詳細請看：info gawk 中的7.x ),只要構造一個隨機不重復的散列函數即可，因為一個文件每行的linenumber是獨一無二的，所以用：
隨機數＋每行linenumber ------對應------> 那一行的內容
即為所構造的隨機函數。
從而有：
其實大家擔心的使用內存過大的問題不必太在意，可以做一個測試：
測試環境：
PM 1.4GHz CPU,40G硬盤，內存256M的LAPTOP
SUSE 9.3 GNU bash version 3.00.16 GNU Awk 3.1.4
產生一個五十幾萬行的隨機文件,大約有38M：
洗牌一次所用時間:
方法二的測試:
接著考察一下方法三的效率：
附帶存一個來自 flyfly 寫的 python 版本亂序代碼：
def usage():
print "usage:program srcfilename dstfilename"
global filename
filename = ""
try:
filename = sys.argv[1]
except:
usage()
raise()
#open the phonebook file
f = open(filename, 'r')
phonebook = f.readlines()
print phonebook
f.close()
#write to file randomly
try:
filename = sys.argv[2]
except:
usage()
raise()
f = open(filename, 'w')
random.shuffle(phonebook)
f.writelines(phonebook)
f.close()
新聞熱點
疑難解答
