我有一个10^7行的文件，我想在其中随机 Select 1/100行
awk 'BEGIN{srand()}
!/^$/{ a[c++]=$0}
END {
for ( i=1;i<=c ;i++ ) {
num=int(rand() * c)
if ( a[num] ) {
print a[num]
delete a[num]
d++
}
if ( d == c/100 ) break
}
}' file
如果你有那么多行，你确定你想要exactly 1%还是统计估计就足够了？
在第二种情况下，只需在每行随机抽取1%...
awk 'BEGIN {srand()} !/^$/ { if (rand() <= .01) print $0}'
如果希望标题行加上后面的随机行样本，请使用:
awk 'BEGIN {srand()} !/^$/ { if (rand() <= .01 || FNR==1) print $0}'