linux shell常见问题

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/gao158190523/article/details/60962008

1.zcat 无法解析后面跟的含变量的多路径

问题描述：

zcat "${eval_root}${eval_path_list}/${eval_name_list}.gz" 无法执行，单独执行：zcat /home/search/data/xxx/data/original_data/{20170111,}/{part-00000,part-00001,part-00002,}.gz却可以。

解决方法：在前面加入关键字eval,zcat在shell脚本中无法对复杂格式进行解析，需要使用eval 才可以。注意，使用··是不可以的。

2.sort的时候提示write failed，设备上没有足够空间

问题描述：

paste filename1 filename2 | sort -k1,1 -rg是，提出空间不足，这里filename1和filename2较大

解决方法：在sort后加入参数-T path 来指定sort时的默认缓存，因为sort的默认缓存为/tmp，这个文件一般大小为1G左右，对于大文件排序来说很容易不够，所以我们指定一个较大空间的文件给sort用来当缓存。