awk的批量replace功能

awk的批量replace功能

需求

现在需要替换一个文本

文本内容如下
$cat file
MD_D1TS_1_060_I
MD_D1TS_1_061_F
MD_D1TS_1_062_U
MD_D1TS_1_002_U
MD_D1TS_1_027_I
MD_D1TS_1_028_U
MD_D1TS_1_003_I
MD_D1TS_1_004_F
MD_D1TS_1_030_I
MD_D1TS_1_005_U
MD_D1TS_1_031_F
MD_D1TS_1_032_I
MD_D1TS_1_006_U
MD_D1TS_1_007_I
MD_D1TS_1_033_F
MD_D1TS_1_034_U
MD_D1TS_1_008_I
MD_D1TS_1_009_U
MD_D1TS_1_035_I
MD_D1TS_1_036_F

就是简单的替换，ctrl + F功能就能搞定的事

但由于数量太多13000+条数据，时间会浪费很多，而且容易出错

只需要每次把替换的内容修改一下，替换的内容都记录在文本name2name中

直接按照文本执行就可以了

$cat name2name
MD_D1TS_1_060   ATS1-1-60
MD_D1TS_1_061   ATS1-1-61
MD_D1TS_1_062   ATS1-1-62
MD_D1TS_1_002   ATS1-1-2
MD_D1TS_1_027   ATS1-1-27
MD_D1TS_1_028   ATS1-1-28
MD_D1TS_1_003   ATS1-1-3
MD_D1TS_1_004   ATS1-1-4
MD_D1TS_1_030   ATS1-1-30
MD_D1TS_1_005   ATS1-1-5
MD_D1TS_1_031   ATS1-1-31
MD_D1TS_1_032   ATS1-1-32
MD_D1TS_1_006   ATS1-1-6
MD_D1TS_1_007   ATS1-1-7
MD_D1TS_1_033   ATS1-1-33
MD_D1TS_1_034   ATS1-1-34
MD_D1TS_1_008   ATS1-1-8
MD_D1TS_1_009   ATS1-1-9
MD_D1TS_1_035   ATS1-1-35
MD_D1TS_1_036   ATS1-1-36

思路

遇到这个问题第一反应就是使用sed，还有就是windows下的notepad++，sublime等软件

但这里最重要的就是将name2name文件进行存储

然后按照这个对应处理

最后想了想还是用awk的数组最熟悉

将要替换的文件内容作为下标key，替换的内容作为值value

然后再读取下一个文件处理

遇到问题

这里算是一个小坑吧，记录下

原来都是直接将文件复制到vim里，然后处理

看内容太多了，使用剪切板速度慢，干脆直接用ftp传入

结果文件处理结果跟我不一样

后来就用了20行测试了一下，想看下问题出在哪里，得到的结果是正确的

我懵逼了，难道awk的数组有限制？毕竟13000+的内容

突然反应过来，windows下的格式问题

$dos2unix filename

解决

awk 'NR==FNR{a[$1]=$2;next}{for(i in a){sub(i,a[i])};print}' name2name file
简单的说明一下
使用NR==FNR;next功能等于将name2name文件内容存入数组
for(i in a)想要读取文件下标只有使用这个方法，而且没有顺序(哈希，我也不懂，但知道是随机顺序)
sub(find,replace) 这是awk一个自带的函数，就是一个replace功能