文本替换求助

bikkuri

大家好！
我有一个问题向大家请教。
假如有以下两个文件main.sh和new.def
# main.sh
#
#-----------------------DEFINITIONS-----------------------------
host1=www.baidu.com
host2=www.sina.com.cn
host3=www.netease.com
#-----------------------DEFINITIONS-----------------------------
for i in $(seq 3); do
[ ! "A"$(eval echo '$'host$i) = "A" ] && echo "host$i is $(eval echo '$'host$i)"
done


# new.def
#-----------------------DEFINITIONS-----------------------------
host1=www.google.com
host2=www.yahoo.com.cn
#-----------------------DEFINITIONS-----------------------------

希望用new.def中两条分割线中间的内容（行数不确定）来替换掉main.sh中两条分割线中间的内容（行数不确定）。
改变后新的main.sh的内容应该变成：
# main.sh
#
#-----------------------DEFINITIONS-----------------------------
host1=www.google.com
host2=www.yahoo.com.cn
#-----------------------DEFINITIONS-----------------------------
for i in $(seq 3); do
[ ! "A"$(eval echo '$'host$i) = "A" ] && echo "host$i is $(eval echo '$'host$i)"
done

谢谢大家！

haooooaaa

1. awk -vRS='#--*DEFINITIONS--*\n' 'NR==FNR{if(FNR==2)s=$0;next}{printf "%s",FNR==2?RT s RT:$0}' new.def main.sh
   
2. # main.sh
   
3. #
   
4. #-----------------------DEFINITIONS-----------------------------
   
5. host1=www.google.com
   
6. host2=www.yahoo.com.cn
   
7. #-----------------------DEFINITIONS-----------------------------
   
8. for i in $(seq 3); do
   
9. [ ! "A"$(eval echo 'host$i) = "A" ] && echo "host$i is $(eval echo 'host$i)"
   
10. done
    

复制代码

1. awk -F= -vOFS='=' 'NR==FNR{if(/^host/)a[++c]=$2;next}{if(/^host/)if(c){$2=a[c--]}else{next}}1' new.def main.sh

复制代码

jason680

分成main.def跟main.src
main.sh = main.def + main.src

bikkuri

不能分的。
平时就是一个main.sh。
只在偶尔的情况下要修改definition。
这种情况下main.sh如果发现new.def文件的存在就把其内容读取替换main.sh中的内容。
也就是说new.def只是一个临时文件，其内容被读取以后就没用了，会被删除。

[root@nchip:/tmp/test]# grep -n DEF new.def
2:#-----------------------DEFINITIONS-----------------------------
5:#-----------------------DEFINITIONS-----------------------------
[root@nchip:/tmp/test]# grep -n DEF main.sh
3:#-----------------------DEFINITIONS-----------------------------
7:#-----------------------DEFINITIONS-----------------------------
[root@nchip:/tmp/test]#

能不能用grep命令得到要替换内容的范围，然后用sed -i来修改main.sh文件。
例如上面例子，用new.def的第2-5行替换main.sh的第3-7行。

回复 2# jason680


   

MMMIX

回复 3# bikkuri


    写个小脚本嘛：

#!/usr/bin/perl

use strict;
use warnings;

use v5.14;
use autodie;

if (@ARGV != 2) {
    die "Usage: $0 new.def main.sh";
}

my $replacements = load_replacement($ARGV[0]);

replace_and_print($replacements, $ARGV[1]);

sub load_replacement {
    local @ARGV = @_;

    my %replacements;
    my $separator = qr/^#-+(\w+)-+$/;
    my $keyword;

    while (<>) {
        if (/$separator/ ... /$separator/) {
            if (not $keyword) {
                $keyword = $1;
                push @{$replacements{$keyword}}, $_;
            } else {
                push @{$replacements{$keyword}}, $_;
                if (/$separator/) {
                    if ($keyword ne $1) {
                        die "Invalid file format: expect keyword $keyword, got $1";
                    }
                    $keyword = undef;
                }
            }
        }
    }

    wantarray ? %replacements : \%replacements;
}

sub replace_and_print {
    my $replacements = shift @_;
    local @ARGV = @_;

    my $separator = qr/^#-+(\w+)-+$/;
    my ($keyword, $in_replacement);
    while (<>) {
        if (/$separator/) {
            if (not $in_replacement) {
                $keyword = $1;
                if (exists $replacements->{$keyword}) {
                    $in_replacement = 1;
                }
            } else {
                print for @{$replacements->{$keyword}};
                $keyword = $in_replacement = undef;
            }
        } else {
            print unless $in_replacement;
        }
    }

    if ($in_replacement) {
        print for @{$replacements->{$keyword}};
    }
}

yjh777

这个办法比较笨:

[yjh@host tmp]$ awk 'BEGIN{RS="#-----------------------DEFINITIONS-----------------------------"} NR==1 {print $0}' kkk.txt >main.sh.new
echo "#-----------------------DEFINITIONS-----------------------------" >>main.sh.new
[yjh@host tmp]$ awk 'BEGIN{RS="#-----------------------DEFINITIONS-----------------------------"} NR==2 {print $0}' new.txt >>main.sh.new
echo "#-----------------------DEFINITIONS-----------------------------" >>main.sh.new
[yjh@host tmp]$ awk 'BEGIN{RS="#-----------------------DEFINITIONS-----------------------------"} NR==3 {print $0}' kkk.txt >>main.sh.new

1. [yjh@host tmp]$ cat kkk.txt
   
2. # main.sh
   
3. #
   
4. #-----------------------DEFINITIONS-----------------------------
   
5. host1=www.baidu.com
   
6. host2=www.sina.com.cn
   
7. host3=www.netease.com
   
8. #-----------------------DEFINITIONS-----------------------------
   
9. for i in $(seq 3); do
   
10. [ ! "A"$(eval echo 'host$i) = "A" ] && echo "host$i is $(eval echo 'host$i)"
    
11. done
    
12. [yjh@host tmp]$ cat new.txt
    
13. # new.def
    
14. #-----------------------DEFINITIONS-----------------------------
    
15. host1=www.google.com
    
16. host2=www.yahoo.com.cn
    
17. #-----------------------DEFINITIONS-----------------------------
    

复制代码

songyc_2015

回复 1# bikkuri

1. awk 'FNR==NR{if($0~/^#-+/&&!f){f=1;next}if($0~/^#-+/&&f){f=0}if(f){s=s?s"\n"$0:$0}next}/^#-+/&&!x{x=1;print;next}/^#-+/&&x{x=0;print s}x{next}1' new.def main.sh
   
2. # main.sh
   
3. #
   
4. #-----------------------DEFINITIONS-----------------------------
   
5. host1=www.google.com
   
6. host2=www.yahoo.com.cn
   
7. #-----------------------DEFINITIONS-----------------------------
   
8. for i in $(seq 3); do
   
9. [ ! "A"$(eval echo 'host$i) = "A" ] && echo "host$i is $(eval echo 'host$i)"
   
10. done

复制代码

tc1989tc

awk 'BEGIN{i=0;j=0}NR==FNR{a[i++]=$0;next}/DEFINITIONS/&&!mild{if(!mild){mild=1;print $0;next}}/DEFINITIONS/&&mild{while (j<(i-1))print a[++j];mild=0}mild{if (j < (i-2))$0=a[++j]; else {j++;next}}1' b.txt a.txt

bikkuri

谢谢您的帮助！
您的命令正是我想要的。
但是在处理实际脚本的时候发现出错了。
例如将刚才的main.sh换成以下内容。

1. # main.sh
   
2. #
   
3. #-----------------------DEFINITIONS-----------------------------
   
4. host1=www.baidu.com
   
5. host2=www.sina.com.cn
   
6. host3=www.netease.com
   
7. #-----------------------DEFINITIONS-----------------------------
   
8. base64_decode()
   
9. {
   
10. if [ -f /usr/bin/uudecode ] ; then
    
11. echo "begin-base64 644 b" > $dec64
    
12. awk '{print $0}' >> $dec64
    
13. echo "====" >> $dec64
    
14. uudecode -o $out64 $dec64
    
15. cat $out64
    
16. rm -f $dec64 $out64
    
17. else
    
18. local buff=""
    
19. for buff in $(awk -v B64="$CODE" '{while(length()){split(substr($0,1,4),a,"");$0=substr($0,5);t=0;for(i=3;i>=0;i--){z=1;for(p=0;p<6*i;p++)z=z*2;t=t+z*((a[4-i]=="=")?0:index(B64,a[4-i])-1)}for(i=2;i>=0;i--)if(a[4-i]!="="){y=1;for(p=0;p<8*i;p++)y=y*2;printf("\\x%x",t/y);t%=y}}printf"\n"}');do printf "$buff"; done
    
20. fi
    
21. }

复制代码

然后再执行您的命令就会报错：

1. [root@nchip:/tmp/test]# awk -vRS='#--*DEFINITIONS--*\n' 'NR==FNR{if(FNR==2)s=$0;next}{printf FNR==2?RT s RT:$0;}' new.def main.sh
   
2. # main.sh
   
3. #
   
4. #-----------------------DEFINITIONS-----------------------------
   
5. host1=www.google.com
   
6. host2=www.yahoo.com.cn
   
7. #-----------------------DEFINITIONS-----------------------------
   
8. awk: cmd. line:1: Invalid format specifier
   
9. [root@nchip:/tmp/test]#

复制代码

如果把那行最长的for开头的行去掉，执行就不会报错。
为什么会有这种情况发生呢？
谢谢！

回复 5# haooooaaa


   

haooooaaa

回复 9# bikkuri


    因为里面的 printf ， 如果有百分号可能有问题， 已更改， 请看上面的相关内容