Поиск и замена слов в файлах linux

Недавно столкнулся с проблемой, мне нужно было найти определенные слова в файлах и заменить их на нужный мне текст. Немного поискав в интернете, я нашел как это сделать, по этому решил записать заметку  «Поиск и замена слов в файлах linux», пригодится как мне так и другим пользователям. Это можно сделать командой find и  grep с некоторыми параметрами.

Простой поиск с использованием grep:

sh1 lines

#·grep -rl 'фраза_для_поиска' /var/папка_для_поиска_(путь_к_файлу)

Поиск и замена текста в файлах:

sh1 lines

#·grep 'текст_который_нужно_искать' -P -R -I -l ·* | xargs sed -i 's/текст_который_нужно_искать/текст_который_нужно_заменить/g'

Удаление определенного символа из файлов

sh1 lines

#·find . -type f -print0 | xargs -0 perl -i -pe 's/\xEF\xBB\xBF//'

Нужно символы прописывать в уникоде, если правильно понял.

Как заменить слово в файлах при рекурсивном поиске Linux?

sh1 lines

#·find -type f -name \*.py -exec sed -i -r 's/text_1/text_2/g' {} \;

Этой строкой мы ищем во всех файлах с разрешением *.py от текущей директории строку text_1 и заменяя  ее наtext_2, так же можно использовать regexp выражения.

Еще примеры

Для начала делаем поиск по фразе которая нам необходима, нам покажет все файлы и в каких строках содержится данная фраза:

sh1 lines

$ find . | xargs grep "require_once"

Получаем:

sh13 lines

┌(captain@Macbook)─(✗)─(03:32 PM Fri Feb 20)└─(~/My works/network)─(203 files, 2576b)─> find . | xargs grep "if ( ! current_user_can( 'manage_sites' ) )"grep: .: Is a directory./site-info.php:if ( ! current_user_can( 'manage_sites' ) )./site-info.php-r:if ( ! current_user_can( 'manage_sites' ) )./site-info.php-r-r:if ( ! current_user_can( 'manage_sites' ) )./site-new.php:if ( ! current_user_can( 'manage_sites' ) )./site-new.php-r:if ( ! current_user_can( 'manage_sites' ) )./site-settings.php:if ( ! current_user_can( 'manage_sites' ) )./site-themes.php:if ( ! current_user_can( 'manage_sites' ) )./site-themes.php-r:if ( ! current_user_can( 'manage_sites' ) )./sites.php:if ( ! current_user_can( 'manage_sites' ) )./sites.php-r:if ( ! current_user_can( 'manage_sites' ) )

или для конкретных файлов:

sh1 lines

$·find . -name ".php" | xargs grep "require_once"

Выполнить замену можно еще следующим образом:

sh1 lines

#·sed -i -r 's/require_once/Я\ махал\ это\ еще\ раз\делать/g' * ;

Допустим, Вам необходимо выполнить замену целой строки ( закомментировать какую либо функцию, добавив // перед самой функцией), то можно это сделать:

sh1 lines

$·sed -i -r 's/Я\ это\ еще\ раз\ cделал/\/\/Ya\ eto \vipolnil/g' * ;

Экранируем спец символы и заменяем на любую другую строку, для этого:

sh1 lines

#·sed -i -r "s|if ( ! current_user_can( 'manage_sites' ) )|//if ( ! current_user_can( 'manage_sites' ) )|" *

Данная команда заменит одну строку на другую во всех файлах.

Упрощенная версия ее:

sh1 lines

#·sed -i 's/\(^.*current_user_can.*manage_sites.*\)$/\/\/\1/' site-info.php

Можно удалить многострочное содержание текста который находиться, например между //###==### и //###==###

То чтобы удалить все строки кода между данными комментариями, выполните:

sh1 lines

#·sed -i 'N;N;s|//###==###\n.*\n//###==###||;P;D' some_file.php

Я делал сканирование maldet и нашел много вредоносного кода, по этому, я удалил его так:

sh1 lines

# cat /tmp/maldet.sorted |awk '{print $3}'|xargs -n1 sed -i 'N;N;s|//###==###\n.*\n//###==###||;P;D'

Еще пример:

sh3 lines

TMP_File="/opt/zabbix/cloudwatch/tmp.txt"Get_AWS_ACCESS_KEY_ID=$(cat $TMP_File | grep -E 'AccessKeyId'| awk '{print $2}'| cut -d '"' -f2)sed -i -e "s/^aws_access_key_id=.*$/aws_access_key_id=$Get_AWS_ACCESS_KEY_ID/g" /opt/zabbix/cloudwatch/conf/awscred

-===Пример===-

Предположим, имеется файл и в нем находится:

sh1 lines

One.Two.Three

Но по заданию, нужно чтобы было —  Three.Two.One

Для этого, выполним:

sh1 lines

$·sed -i -e "s/\(One\).\(Two\).\(Three\)/\3\.\2.\1/g" test.txt

PS: О долбанном SED-е я расскажу очень не скоро, он меня реально бесит и злит. Кто ее придумал, реальный сука ДЖЕДАЙ

Делаем замену другим способом:

sh3 lines

$ rpl -iqR require_once slogniy_etot_SED *$ rpl -iqR slogniy_etot_SED я\ Али\ Баба *

ПРИМЕЧАНИЕ! Утилиту rpl необходимо установить.

Centos/RedHat/Fedora:

sh1 lines

# yum install rpl

Debian/Ubuntu/Mint:

sh1 lines

# apt-get install rpl

MacOS:

Выполняем установку:

sh1 lines

# brew install rpl

Я попозже постараюсь привести еще примеров и рассказать о утилите в своей новой статье.

Когда не удобно искать файлы в консольном режиме и есть GUI интерфейс, то можно воспользоваться утилитой regexxer.
Debian/Ubuntu/Mint:

sh1 lines

#·sudo aptitude install regexxer

или

sh1 lines

# sudo apt-get install regexxer

CentOS/RedHat/Fedora:

sh1 lines

#·sudo yum·install regexxer

Очень простая и хорошая утилита, я сам ею пользовался и тестировал на своей виртуальной машине на Debian.

На этом моя короткая заметка  «Поиск и замена слов в файлах linux» завершена и готова к использованию.

Добавить комментарий