Linux удалить все windows символы

Содержание
  1. Как удалить (удалить) символические ссылки в Linux
  2. How to Remove (Delete) Symbolic Links in Linux
  3. В этом руководстве мы покажем вам , как удалить символические ссылки в системах Linux / UNIX с использованием rm , unlink и find команды.
  4. Прежде чем вы начнете
  5. Удалить символические ссылки с rm
  6. Удалить символические ссылки с unlink
  7. Найти и удалить неработающие символические ссылки
  8. Вывод
  9. Команда tr в Linux с примерами
  10. Команда tr и ее синтаксис
  11. 1) Заменить все строчные буквы на заглавные
  12. 2) Удаление символов с помощью tr
  13. 3) Удаление ила змена символов НЕ в наборе
  14. 4) Замена пробелов на табуляцию
  15. 5) Удаление повторений символов
  16. 6) Заменить символы из набора на перенос строки
  17. 7) Генерируем список уникальных слов из файла
  18. 8) Кодируем символы с помошью ROT
  19. Вывод
  20. C.1. Sed
  21. Изучаем команды Linux: команда sed Linux
  22. Команда sed в Linux
  23. Установка
  24. Концепции
  25. Как работает sed
  26. Адреса sed
  27. Синтаксис
  28. Особенности адресов, предающихся утилите «sed»
  29. Использование специальных символов:
  30. Регулярные выражения
  31. Использование переменных в выражениях sed
  32. Основные команды Sed
  33. Замена слова в файле
  34. Замена слова в файле и вывод результата в другой файл
  35. Замена слова в нескольких файлах одновременно
  36. Отбросить всё, что левее определённого слова
  37. Отбросить всё, что правее определённого слова
  38. Экранирование символов в sed
  39. Два условия одновременно в Sed
  40. Удаление переходов на новую строку
  41. Удалить всё после определённой строки
  42. Удаление текста
  43. Замена текста
  44. Примеры использования sed
  45. В окружении UNIX: конвертируем новые строки DOS (CR/LF) в формат Unix.

Как удалить (удалить) символические ссылки в Linux

В этом руководстве мы покажем вам , как удалить символические ссылки в системах Linux / UNIX с использованием rm , unlink и find команды.

Символическая ссылка, также известная как символическая ссылка, представляет собой специальный тип файла, который указывает на другой файл или каталог. Это что-то вроде ярлыка в Windows. Символьная ссылка может указывать на файл или каталог в той же или другой файловой системе или разделе.

Прежде чем вы начнете

Чтобы удалить символическую ссылку, вам нужно иметь права на запись в каталог, который содержит символическую ссылку. В противном случае вы получите ошибку «Операция не разрешена».

Когда вы удаляете символическую ссылку, файл, на который она указывает, не затрагивается.

Используйте ls -l команду, чтобы проверить, является ли данный файл символической ссылкой, и найти файл или каталог, на который указывает символическая ссылка.

Первый символ «l» указывает, что файл является символической ссылкой. Символ «->» показывает файл, на который указывает символическая ссылка.

Удалить символические ссылки с rm

Команда rm удаляет указанные файлы и каталоги.

Чтобы удалить символическую ссылку, вызовите rm команду, за которой следует символическое имя ссылки в качестве аргумента:

В случае успеха команда завершается с нуля и не выводит никаких данных.

С rm его помощью вы можете удалить более одной символической ссылки одновременно. Для этого передайте имена символических ссылок в качестве аргументов через пробел:

Чтобы получить запрос перед удалением символической ссылки, используйте -i параметр:

Для подтверждения типа y и нажмите Enter .

Если символическая ссылка указывает на каталог, не добавляйте / завершающий слеш в конце. В противном случае вы получите ошибку:

Если имя аргумента заканчивается на / , rm команда предполагает, что файл является каталогом. Ошибка возникает потому, что при использовании без параметра -d или -r , rm невозможно удалить каталоги.

Чтобы быть в безопасности, никогда не -r вариант при удалении символических ссылок с rm . Например, если вы наберете:

Содержимое целевого каталога будет удалено.

Чтобы удалить символическую ссылку, запустите unlink команду с именем символической ссылки в качестве аргумента:

Если команда выполняется успешно, она не отображает вывод.

Не добавляйте / косую черту в конце имени символической ссылки, потому что unlink не можете удалить каталоги.

Найти и удалить неработающие символические ссылки

Если вы удалите или переместите исходный файл в другое место, символический файл останется висящим (поврежденным).

Команда выведет список всех неработающих ссылок в каталоге и его подкаталогах.

Если вы хотите исключить символические ссылки, содержащиеся в подкаталогах, передайте -maxdepth 1 параметр find :

После того, как вы найдете нарушенные символические ссылки, вы можете вручную удалить их с rm или unlink или использовать -delete опцию в find команде:

Вывод

Чтобы удалить символическую ссылку, используйте команду rm или, unlink за которой следует имя символической ссылки в качестве аргумента. При удалении символической ссылки, указывающей на каталог, не добавляйте косую черту к имени символической ссылки.

Команда tr в Linux с примерами

Команда tr (translate) используется в Linux в основном для преобразования и удаления символов. Она часто находит применение в скриптах обработки текста. Ее можно использовать для преобразования верхнего регистра в нижний, сжатия повторяющихся символов и удаления символов.

Команда tr требует два набора символов для преобразований, а также может использоваться с другими командами, использующими каналы (пайпы) Unix для расширенных преобразований.

В этой статье мы узнаем, как использовать команду tr в операционных системах Linux и рассмотрим некоторые примеры.

Команда tr и ее синтаксис

Ниже приведен синтаксис команды tr. Требуется, как минимум, два набора символов и опции.

SET1 и SET2 это группы символов. are a group of characters. Необходимо перечислить необходимые символы или указать последовательность.

\NNN -> восмеричные (OCT) символы NNN (1 до 3 цифр)

\\ -> обратный слеш (экранированный)

\n -> новая строка (new line)

\r -> перенос строки (return)

\t -> табуляция (horizontal tab)

[:alnum:] -> все буквы и цифры

[:alpha:] -> все буквы

[:blank:] -> все пробелы

[:cntrl:] -> все управляющие символы (control)

[:digit:] -> все цифры

[:lower:] -> все буквы в нижнем регистре (строчные)

[:upper:] -> все буквы в верхнем регистре (заглавные)

Примеры использования команды tr:

Вот некоторые опции:

-c , -C , —complement -> удалить все символы, кроме тех, что в первом наборе
-d , —delete -> удалить символы из первого набора
-s , —squeeze-repeats -> заменять набор символов, которые повторяются, из указанных в последнем наборе знаков

1) Заменить все строчные буквы на заглавные

Мы можем использовать tr для преобразования нижнего регистра в верхний или наоборот.

Просто используем наборы [:lower:] [:upper:] или «a-z» «A-Z» для замены всех символов.

Вот пример, как преобразовать в Linux с помощью команды tr все строчные буквы в заглавные:

А сейчас сделаем замену из файла input.txt

Как мы видим, в файле ничего не изменилось, осталось все строчными буквами. Чтобы изменения были в файле, на необходимо перевести вывод в новый файл. Например, в output.txt

Кстати, в команде sed есть опция y которая делает то же самое (sed ‘y/SET1/SET2’)

2) Удаление символов с помощью tr

Опция -d используется для удаления всех символов, которые указаны в наборе символов.

Следующая команда удалит все символы из этого набора ‘aei’.

Следующая команда удалит все цифры в тексте. Будем использовать набор [:digit:] , чтобы определить все цифры.

А вот пример команд, которыми можно удалить переносы на новые строки

3) Удаление ила змена символов НЕ в наборе

С помощью параметра -c Вы можете сказать tr заменить все символы, которые Вы не указали в наборе. Приведем пример.

А вот пример удаления, просто укажем опцию -d и только один набор (символы которого удалять НЕ надо, а остальные удалить)

4) Замена пробелов на табуляцию

Для указания пробелов используем — [:space:] , а для табуляции — \t.

5) Удаление повторений символов

Это делает параметр -s . Рассмотрим пример удаления повторов знаков.

Или заменим повторения на символ решетки

6) Заменить символы из набора на перенос строки

Сделаем так, чтобы все буквы были заменены на перенос новой строки:

7) Генерируем список уникальных слов из файла

Это иногда очень полезная команда, когда необходимо определить количество повторений и вывести уникальные слова из файла:

8) Кодируем символы с помошью ROT

ROT (Caesar Cipher) — это тип криптографии, в котором кодирование выполняется путем перемещения букв в алфавите к его следующей букве.

Давайте проверим, как использовать tr для шифрования.

В следующем примере каждый символ в первом наборе будет заменен соответствующим символом во втором наборе.

Первый набор [a-z] (это значит abcdefghijklmnopqrstuvwxyz). Второй набор [n-za-m] (который содержит pqrstuvwxyzabcdefghijklmn).

Простая команда для демонстрации вышеуказанной теории:

Полезно при шифровании электронных адресов:

Вывод

tr — это очень мощная команда линукс при использовании пайпов Unix и очень часто используется в скриптах. Дополнительную информацию об этой утилите всегда можно найти в man.

Если у Вас есть какие-либо дополнения, не стесняйтесь пишите в комментариях.

C.1. Sed

Sed — это неинтерактивный строчный редактор. Он принимает текст либо с устройства stdin , либо из текстового файла, выполняет некоторые операции над строками и затем выводит результат на устройство stdout или в файл. Как правило, в сценариях, sed используется в конвейерной обработке данных, совместно с другими командами и утилитами.

Sed определяет, по заданному адресному пространству, над какими строками следует выполнить операции. [66] Адресное пространство строк задается либо их порядковыми номерами, либо шаблоном. Например, команда 3d заставит sed удалить третью строку, а команда /windows/d означает, что все строки, содержащие «windows», должны быть удалены.

Читайте также:  Windows server in the cloud

Из всего разнообразия операций, мы остановимся на трех, используемых наиболее часто. Это p — печать (на stdout ), d — удаление и s — замена.

Таблица C-1. Основные операции sed

Операция Название Описание
[диапазон строк]/p print Печать [указанного диапазона строк]
[диапазон строк]/d delete Удалить [указанный диапазон строк]
s/pattern1/pattern2/ substitute Заменить первое встреченное соответствие шаблону pattern1, в строке, на pattern2
[диапазон строк]/s/pattern1/pattern2/ substitute Заменить первое встреченное соответствие шаблону pattern1, на pattern2, в указанном диапазоне строк
[диапазон строк]/y/pattern1/pattern2/ transform заменить любые символы из шаблона pattern1 на соответствующие символы из pattern2, в указанном диапазоне строк (эквивалент команды tr)
g global Операция выполняется над всеми найдеными соответствиями внутри каждой из заданных строк

Без оператора g (global), операция замены будет производиться только для первого найденого совпадения, с заданным шаблоном, в каждой строке.

В отдельных случаях, операции sed необходимо заключать в кавычки.

В отдельных случаях, команды редактирования не работают в одиночных кавычках.

Sed использует ключ -e для того, чтобы определить, что следующая строка является инструкцией, или набором инструкций, редактирования. Если инструкция является единственной, то использование этого ключа не является обязательным.

Таблица C-2. Примеры операций в sed

Операция Описание
8d Удалить 8-ю строку.
/^$/d Удалить все пустые строки.
1,/^$/d Удалить все строки до первой пустой строки, включительно.
/Jones/p Вывести строки, содержащие «Jones» (с ключом -n).
s/Windows/Linux/ В каждой строке, заменить первое встретившееся слово «Windows» на слово «Linux».
s/BSOD/stability/g В каждой строке, заменить все встретившиеся слова «BSOD» на «stability».
s/ *$// Удалить все пробелы в конце каждой строки.
s/00*/0/g Заменить все последовательности ведущих нулей одним символом «0».
/GUI/d Удалить все строки, содержащие «GUI».
s/GUI//g Удалить все найденые «GUI», оставляя остальную часть строки без изменений.

Замена строки пустой строкой, эквивалентна удалению части строки, совпадающей с шаблоном. Остальная часть строки остается без изменений. Например, s/GUI// , изменит следующую строку

Символ обратного слэша представляет символ перевода строки, как символ замены. В этом случае, замещающее выражение продолжается на следующей строке.

Эта инструкция заменит начальные пробелы в строке на символ перевода строки. Ожидаемый результат — замена отступов в начале параграфа пустыми строками.

Указание диапазона строк, предшествующее одной, или более, инструкции может потребовать заключения инструкций в фигурные скобки, с соответствующими символами перевода строки.

В этом случае будут удалены только первые из нескольких, идущих подряд, пустых строк. Это может использоваться для установки однострочных интервалов в файле, оставляя, при этом, пустые строки между параграфами.

Быстрый способ установки двойных межстрочных интервалов в текстовых файлах — sed G filename .

Примеры использования sed в сценариях командной оболочки, вы найдете в:

Изучаем команды Linux: команда sed Linux

Команда sed — это потоковый редактор текста, работающий по принципу замены. Его можно использовать для поиска, вставки, замены и удаления фрагментов. Утилиту sed называют потоковым текстовым редактором. В интерактивных текстовых редакторах, наподобие nano, с текстами работают, используя клавиатуру, редактируя файлы, добавляя, удаляя или изменяя тексты. Sed позволяет редактировать потоки данных, основываясь на заданных разработчиком наборах правил.

Команда sed в Linux

Сначала рассмотрим синтаксис команды:

$ sedопции-e командыфайл

А вот её основные опции:

  • -n, —quiet — не выводить содержимое буфера шаблона в конце каждой итерации;
  • -e — команды, которые надо выполнить для редактирования;
  • -f — прочитать команды редактирования из файла;
  • -i — сделать резервную копию файла перед редактированием;
  • -l — указать свою длину строки;
  • -r — включить поддержку расширенного синтаксиса регулярных выражений;
  • -s — если передано несколько файлов, рассматривать их как отдельные потоки, а не как один длинный.

Установка

Здесь не нужно много рассказывать. Скорее все sed у вас уже установлен, так как он используется различными системными скриптами, а также пользователями Linux, которые хотят повысить эффективность своей работы. Вы можете узнать, какая версия sed у вас установлена, с помощью команды:

В моей системе эта команда показывает, что у меня установлен GNU sed 4.2.1 плюс дает ссылку на домашнюю страницу программы и другие полезные сведения. Пакет называется «sed» независимо от дистрибутива, кроме Gentoo, где он присутствует неявно.

Концепции

Перед тем, как идти дальше, мы считаем важным акцентировать внимание на том, что делает «sed», так как словосочетание «потоковый редактор» мало что говорит о его назначении. sed принимает на входе текст, выполняет заданные операции над каждой строкой (если не задано другое) и выводит модифицированный текст. Указанными операциями могут быть добавление, вставка, удаление или замена. Это не так просто, как выглядит: предупреждаю, что имеется большое количество опций и их комбинаций, которые могут сделать команду sed очень трудной для понимания. Поэтому мы рекомендуем вам изучить основы регулярных выражений, чтобы понимать, как это работает. Перед тем, как приступить к руководству, мы хотели бы поблагодарить Eric Pement и других за вдохновление и за то, что он сделал для всех, кто хочет изучать и использовать sed.

Как работает sed

Теперь нужно понять как работает команда sed. У утилиты есть два буфера, это активный буфер шаблона и дополнительный буфер. Оба изначально пусты. Программа выполняет заданные условия для каждой строки в переданном ей файле.

sed читает одну строку, удаляет из неё все завершающие символы и символы новой строки и помещает её в буфер шаблона. Затем выполняются переданные в параметрах команды, с каждой командой может быть связан адрес, это своего рода условие и команда выполняется только если подходит условие.

Когда всё команды будут выполнены и не указана опция -n, содержимое буфера шаблона выводится в стандартный поток вывода перед этим добавляется обратно символ перевода строки. если он был удален. Затем запускается новая итерация цикла для следующей строки.

Если не используются специальные команды, например, D, то после завершения одной итерации цикла содержимое буфера шаблона удаляется. Однако содержимое предыдущей строки хранится в дополнительном буфере и его можно использовать.

Адреса sed

Каждой команде можно передать адрес, который будет указывать на строки, для которых она будет выполнена:

  • номер — позволяет указать номер строки, в которой надо выполнять команду;
  • первая

шаг — команда будет выполняется для указанной в первой части сроки, а затем для всех с указанным шагом;

  • $ — последняя строка в файле;
  • /регулярное_выражение/ — любая строка, которая подходит по регулярному выражению. Модификатор l указывает, что регулярное выражение должно быть не чувствительным к регистру;
  • номер, номер — начиная от строки из первой части и заканчивая строкой из второй части;
  • номер, /регулярное_выражение/ — начиная от сроки из первой части и до сроки, которая будет соответствовать регулярному выражению;
  • номер, +количество — начиная от номера строки указанного в первой части и еще плюс количество строк после него;
  • номер,

    число — начиная от строки номер и до строки номер которой будет кратный числу.

    Если для команды не был задан адрес, то она будет выполнена для всех строк. Если передан один адрес, команда будет выполнена только для строки по этому адресу. Также можно передать диапазон адресов. Тогда адреса разделяются запятой и команда будет выполнена для всех адресов диапазона.

    Синтаксис

    Синтаксис данной утилиты не отличается сложностью. Он представлен в виде:

    Первоначально необходимо изучить основные параметры, которые поддерживает команда:

    • «-n» — дает возможность не выводить содержимое, присутствующее в буфере шаблона после каждой итерации.
    • «-e» — позволяет выполнить команды, которые необходимы для редактирования текста.
    • «-f» — дает возможность прочесть команды, которые были использованы при изменении файла.
    • «-l». Опция позволяет указать требуемую длину строки.
    • «-r». Опция применяется для включения поддержки синтаксиса расширенного типа, распространяющегося на активно используемые выражения.
    • «-i». Функция предназначена для создания копии файла (в резерве) перед тем, как он будет отредактирован.
    • «-s». Опция позволяет изучить несколько файлов единовременно. Они будут просмотрены не как длинные потоки, а как отдельные.

    Чтобы выполнить несколько действий, используется аргумент «-e».

    sed -e [команды] (файл)

    Первоначально кажется, что данная утилита очень сложная. На самом деле это не так, ей сможет пользоваться даже новичок в сфере программирования.

    Стоит отметить, что данная утилита имеет два отдельно обособленных буфера – это основной и вспомогательный буфер (активного и пассивного плана). Первоначально они абсолютно пусты. Специальная программа передает предварительно определенные условия для всех строк передаваемого файла.

    Первоначально программа «sed» изучает одну строку. Из нее удаляются все завершающие данные, а также символы, присутствующие в новой строке. Обрабатываемая стока помещается в главный буфер.

    Далее выполняются команды, которые были переданы пользователем в параметрах. За каждой определенной командой закрепляется адрес. Он используется в качестве своеобразного условия. Команда пройдет лишь в том случае, если данное условие будет соблюдено.

    После выполнения всех предписанных команд, содержимое буфера шаблона попадает в классический поток вывода. Это происходит в том случае, если предварительно не была указана функция «-n», которая ограничивает вывод содержимого.

    Когда символ перевода изначально был удален, он добавляется обратно. Только после этого запускается следующая интерпретация, подразумевающая обработку новой строки.

    Когда пользователь не планирует использование специальных команд, после завершения первой интерпретации все содержимое основного буфера будет удалено. Стоит отметить, что содержимое, которое относится к первоначально обработанной строке, сохраняется во вспомогательном буфере. Его применяют в дальнейшем при осуществлении задач.

    Особенности адресов, предающихся утилите «sed»

    Все команды получают свой адрес. Именно он указывает на строки, для которых выполняется команда:

    • «номер». В данном случае прописывается номер определенной строки, где в последующем будет выполняться команда.
    • «первая

    шаг». Здесь команда выполняется для изначальной части строки, а далее – для всех остальных. В обязательном порядке указывается шаг.

  • «$». Обрабатывается последняя строка, которая относится к выбранному вами файлу.
  • «/часто используемое_выражение/». Здесь используется любая строка, подходящая по регулярному выражению. Оно не должно зависеть от особенностей регистра.
  • «номер, номер». Обработка начинается с начала первой строки, а заканчивается концом второй строки.
  • «номер,/регулярное_выражение/». Обработка начинается с первоначальной строки, заканчивается в той, которая соответствует информации в часто используемых фразах.
  • «номер+количество». Обработка начинается с верхней строки, длится до той поры, пока не будет исчерпано предварительно указанное число строк.
  • «номер

    число». Обработка начинается со строки с определенным номеров. Она заканчивается той строкой, которая кратна определенному числовому обозначению.

    Когда пользователь не желает задавать определенный адрес для программы «sed», она распространяется на все строки в файле. Если передается один адрес, команда выполняется до той строки, которая расположена по указанному адресу.

    Есть возможность передавать диапазон адресов. Информация разделяется запятыми, а команда осуществляется для тех адресов, которые находятся в требуемом диапазоне.

    Использование специальных символов:

    Можно использовать спецсимволы:
    ^ — начало строки
    $ — конец строки
    . — обозначение одного символа

    Полный набор не ограничен только этими тремя. Sed прекрасно понимает регулярные выражения (regular expressions).

    Следующая команда заменит root на Admin в тех строках, которые начинаются с user:

    sed ‘/^user/s/root/Admin/g’ имя_файла

    Следующая команда заменит root на Admin в тех строках, которые заканчиваются словом data:

    sed ‘/data$/s/root/Admin/g’ имя_файла

    В том, случае если Вам нужно использовать какой-либо спецсимвол в sed ( $, ^, /, пробел, точка, ‘, и т.д.) его нужно экранировать с помощью .

    С помощью следующей конструкции слово root с пробелом после него будет заменено на Admin с двоеточием:

    sed ‘s/root /Admin:/g’ имя_файла

  • В случае использования символа (pipe) в качестве разделителя спецсимволы экранировать не нужно, но при этом регулярные выражения работать не будут

    sed ‘s|root |Admin:|g’ имя_файла

    Регулярные выражения

    Убрать все цыфры из вывода:

    Продублировать отсеченное значение:

    echo`123 abc` | sed ‘s/77*/&-&/’

    Регулярное выражение 4* определят 0 или больше цыфр.
    Регулярное выражение 44* определят 1 или больше цыфр.

    Если Вам нужно использовать первое слово из строки текста — обзначьте его экранированой цыфрой:

    echo’abcd qwer zxc 123’| sed ‘s/([a-z]*).*/1/’

    Для того что бы поменять местами первое и второе слово — воспользуйтесь следующей конструкцией:

    Пробел в левой части выражения может быть заменен на любой другой разделитель.

    echo’abcd qwer zxc 123’| sed -r’s/([a-z]+) ([a-z]+)/2 1/’

    echo’abcd_qwer_zxc_123’| sed -r’s/([a-z]+)_([a-z]+)/2**_**1/’echo’abcd_qwer_zxc_123’| sed -r’s/([a-z]+)**_**([a-z]+)/2 1/’

    Замена текства между двумя словами:

    sed -ure’s/**word1**.+?**word2**/**word1** замена **word2**/g’-i файл

    Использование переменных в выражениях sed

    При написании bash скриптов мы используем переменные. Иногда возникает необходимость использовать эти переменные в выражениях sed.

    Самый простой подход — использование двойных кавычек для обертки выражения:

    Двойные кавычки не сработают, есть в $var1 или $var2 присутвствуют спецсимволы. Лучше всего — исключать переменные из обертки:

    Основные команды Sed

    Для того чтобы применить SED достаточно ввести в командную строку

    echo ice | sed s/ice/fire/

    Замена слова в файле

    Обычно SED применяют к файлам, например к логам или конфигам.
    Предположим, что у нас есть файл input.txt следующего содержания

    Here is a StringHere is an IntegerHere is a Float

    Мы хотим заменить слово Here на There

    sed ‘s/Here/There/’ input.txt

    Результат будет выведен в консоль:

    There is a String
    There is an Integer
    There is a Float

    Если нужно не вывести в консоль а изменить содержание файла — используем опцию -i

    sed -i ‘s/Here/There/’ input.txt

    В этом случае перепишется исходный файл input.txt

    Рассмотрим пример посложнее. Файл input.txt теперь выглядит так:

    Here is an Apple. Here is a Pen. Here is an ApplePenInteger is HereHere is a FloatHere is a Pen. Here is a Pineapple. Here is a PineapplePen

    sed ‘s/Here/There/’ input.txt

    Как Вы сейчас увидите, замена произойдёт только по одному разу в строке

    There is an Apple. Here is a Pen. Here is an ApplePen
    Integer is There
    There is a Float
    There is a Pen. Here is a Pineapple. Here is a PineapplePen

    Чтобы заменить все слова нужна опция g

    sed ‘s/Here/There/g’ input.txt

    There is an Apple. There is a Pen. There is an ApplePen
    Integer is There
    There is a Float
    There is a Pen. There is a Pineapple. There is a PineapplePen

    Замена слова в файле и вывод результата в другой файл

    Та же замена, но с выводом в новый текстовый файл, который мы назовём output:

    sed ‘s/Here/There/’ input.txt > output.txt

    Замена слова в нескольких файлах одновременно

    Если нужно обработать сразу несколько файлов: например файл 1.txt с содержанием

    First File: Here

    И файл 2.txt с содержанием

    Second File: Here

    Это можно сделать используя *.txt

    sed ‘s/Here/There/’ *.txt > output.txt

    На выходе файл output.txt будет выглядеть так

    First File: ThereSecond File: There

    Отбросить всё, что левее определённого слова

    Предположим, что у нас есть файл input.txt следующего содержания

    Here is a String it has a NameHere is an Integer it has a NameHere is a Float it has a Name

    Мы хотим отбросить всё, что находится левее слова it, включая слово it, и записать в файл.

    sed ‘s/^.*it//’ input.txt > output.txt

    ^ означает, что мы стартуем с начала строки Результат:

    has a Name
    has a Name
    has a Name

    Для доступности объясню синтаксис сравнив две команды. Посмотрите внимательно, когда мы заменяем слово Here на There.
    There находится между двумя слэшами. Раскрашу их для наглядности в зелёный и красный.

    sed ‘s/Here /There /

    А когда мы хотим удалить что-то, мы сначала описываем, что мы хотим удалить. Например, всё от начала строки до слова it.
    Теперь в правой части условия, где раньше была величина на замену, мы ничего не пишем, т.е. заменяем на пустое место. Надеюсь, логика понятна.

    sed ‘s/^.*it / /‘ > output.txt

    Отбросить всё, что правее определённого слова

    Предположим, что у нас есть файл input.txt следующего содержания

    Here is a String / it has a NameHere is an Integer / it has a NameHere is a Float / it has a Name

    Мы хотим отбросить всё, что находится правее слова is, включая слово is, и записать в файл.

    sed ‘s/is.*//’ > output.txt

    Экранирование символов в sed

    Специальные символы экранируются с помощью
    Предположим, что у нас есть файл input.txt следующего содержания

    Here is a String / it has a NameHere is an Integer / it has a NameHere is a Float it / has a Name

    Мы хотим отбросить всё, что находится левее /a, включая /a, и записать в файл.

    sed ‘s/^.*/a//’ > output.txt

    В результате получим ошибку

    -e expression #1, char 15: unknown option to `s’

    Чтобы команда заработала нужно добавить перед /

    sed ‘s/^.* /a//’ > output.txt

    Here is a StringHere is an IntegerHere is a Float

    Два условия одновременно в Sed

    Предположим, что у нас есть файл input.txt следующего содержания

    Here is a String /b it has a NameHere is an Integer /b it has a NameHere is a Float /b it has a Name

    Мы хотим отбросить всё, что находится левее /b, включая /b, и всё, что правее has.
    Таким образом, в каждой строчке должно остаться только слово it.
    Нужно учесть необходимость экранирования специального символа / а также мы хотим направить вывод в файл.

    sed ‘s/^.*/b// s/has.*//’ input.txt > output.txt

    Удаление переходов на новую строку

    Удалить всё после определённой строки

    Допустим Вы хотите удалить все строки после третьей

    sed 3q input.txt > output.txt

    Удаление текста

    Можно легко удалить текст, который мы выводили в предыдущем примере, заменив команду “p” на команду “d”. Команда «-n» нам больше не нужна, потому что при использовании команды удаления утилита выводит все, что не удалено. Это позволяет нам видеть, что происходит. Изменим последнюю команду из предыдущего раздела так, чтобы она удаляла все нечетные строки, начиная с первой. В результате мы должны получить все строки, которые не были выведены в прошлый раз.

    2d’ BSD All rights reserved. Redistribution and use in source and binary forms, with or without are met: notice, this list of conditions and the following disclaimer. notice, this list of conditions and the following disclaimer in the 3. Neither the name of the University nor the names of its contributors without specific prior written permission. . . . . . .

    При этом исходный файл не меняется. Результаты редактирования просто выводятся на экран. Если результат нужно сохранить, можно перенаправить стандартный вывод в файл:

    2d’ BSD > everyother.txt

    Открыв этот файл командой cat, мы увидим тот же результат, который был на экране после выполнения предыдущей команды. По умолчанию sed не редактирует исходный файл в целях безопасности. Это можно изменить при помощи опции «-i», которая означает редактирование на месте. Исходный файл будет изменен. Давайте попробуем отредактировать только что созданный нами файл «everyother.txt». Снова удалим все нечетные строки:

    При помощи cat можно убедиться, что файл был отредактирован.

    Опция “-i” может быть опасной, но утилита предоставляет возможность создания резервной копии перед редактированием. Для этого сразу после опции “-i” укажите расширение резервной копии “.bak”:

    Будет создан файл резервной копии с расширением “bak”, а затем выполнено редактирование исходного файла.

    Замена текста

    Чаще всего sed используется для замены текста. Редактор позволяет осуществлять поиск текста по шаблону при помощи регулярных выражений. А затем заменять найденный текст. В простейшем варианте можно заменить одно слово на другое, используя следующий синтаксис:

    Параметр «s» – это команда замены. Три слэша (/) нужны для разделения различных текстовых полей. Если вам удобно, вы можете использовать для этого другие символы. Например, если нам нужно изменить имя веб-сайта, удобнее использовать другой разделитель, так как URL содержат слэши. Воспользуемся командой echo для передачи примера:

    echo «http://www.example.com/index.html» | sed ‘s_com/index_org/home_’ http://www.example.org/home.html

    Здесь секция «com/index» заменяется на «org/home». В качестве разделителя используется нижнее подчеркивание «_». Не забудьте про последний разделитель, иначе sed выдаст ошибку.

    echo «http://www.example.com/index.html» | sed ‘s_com/index_org/home’ sed: -e expression #1, char 22: unterminated `s’ command

    Создадим файл для отработки замен:

    echo «this is the song that never ends yes, it goes on and on, my friend some people started singing it not knowing what it was and they’ll continue singing it forever just because…» > annoying.txt

    Теперь заменим «on» на «forward»

    sed ‘s/on/forward/’ annoying.txt this is the sforwardg that never ends yes, it goes forward and on, my friend some people started singing it not knowing what it was and they’ll cforwardtinue singing it forever just because…

    Стоит обратить внимание на ряд моментов. Во-первых, мы заменяем шаблоны, а не слова. “on” в слове “song” было заменено на “forward”. Во-вторых, второе “on” в строке 2 заменено не было. Это произошло потому, что по умолчанию команда “s” обрабатывает первое совпадение в строке. А затем переходит к следующей строке. Для замены каждого “on”, а не только первого в строке, можно указать команде замены флаг “g” после шаблонов:

    sed ‘s/on/forward/g’ annoying.txt this is the sforwardg that never ends yes, it goes forward and forward, my friend some people started singing it not knowing what it was and they’ll cforwardtinue singing it forever just because…

    Теперь были заменены все “on”. Чтобы заменить только вторые “on” в каждой строке, вместо “g” нужно указать “2”:

    sed ‘s/on/forward/2’ annoying.txt this is the song that never ends yes, it goes on and forward, my friend some people started singing it not knowing what it was and they’ll continue singing it forever just because…

    Если нам нужно вывести только те строки, где выполнялась замена, для отмены автоматического вывода можно снова воспользоваться опцией «-n». Затем мы можем передать флаг “p” для вывода строк, в которых производились замены.

    sed -n ‘s/on/forward/2p’ annoying.text yes, it goes on and forward, my friend

    Пример показывает, что флаги в конце команды можно комбинировать. Чтобы игнорировать регистр, нужно указать флаг “i”.

    sed ‘s/SINGING/saying/i’ annoying.txt this is the song that never ends yes, it goes on and on, my friend some people started saying it not knowing what it was and they’ll continue saying it forever just because…

    Если нужно заменить текст во всех файлах директории то можно воспользоваться командой

    grep ‘текс’ -P -R -I -l * | xargs sed -i ‘s/текст_который_нужно_искать/текст/g’

    Примеры использования sed

    Синтаксис команды Описание
    sed ‘s/Nick/John/g’ report.txt Заменяет каждое вхождение Nick на John в файле report.txt
    sed ‘s/Nick|nick/John/g’ report.txt Заменяет каждое вхождение Nick или nick на John.
    sed ‘s/^/ /’ file.txt > file_new.txt Добавляет 8 пробелов слева от текста для улучшения качества печати.
    sed -n ‘/Of course/,/attention you pay/p’ myfile Выводит все абзацы, начинающиеся с «Of course» и заканчивающиеся на «attention you pay».
    sed -n 12,18p file.txt Выводит только строки 12-18 файла file.txt
    sed 12,18d file.txt Выводит весь файл file.txt за исключением строк с 12 по 18
    sed G file.txt Вставляет пустую строку после каждой строки в file.txt
    sed -f script.sed file.txt Записывает все команды в script.sed и выполняет их.
    sed ‘5!s/ham/cheese/’ file.txt Заменяет ham на cheese в file.txt за исключением 5-й строки
    sed ‘$d’ file.txt Удаляет последнюю строку
    sed -n ‘/7<3>/p’ file.txt Печатает только строки с тремя последовательными цифрами
    sed ‘/boom/s/aaa/bb/’ file.txt Если найден «boom», заменить aaa на bb
    sed ’17,/disk/d’ file.txt Удаляет все строки, начиная с 17-й, до «disk». Если строк с «disk» несколько, удаляет до первой из них.
    echo ONE TWO | sed «s/one/unos/I» Заменяет one на unos независимо от регистра, поэтому будет напечатано «unos TWO»
    sed ‘G;G’ file.txt Вставляет две пустые строки после каждой строки в file.txt
    sed ‘s/.$//’ file.txt Способ замены dos2unix :). В общем случае удаляет последний символ в каждой строке.
    sed ‘s/^[ t]*//’ file.txt Удаляет все пробелы/табы перед каждой строкой в file.txt
    sed ‘s/[ t]*$//’ file.txt Удаляет все пробелы/табы в конце каждой строки в file.txt
    sed ‘s/^[ t]*//;s/[ t]*$//’ file.txt Удаляет все пробелы/табы в начале и в конце каждой строки в file.txt
    sed ‘s/foo/bar/’ file.txt Заменяет foo на bar только в первом вхождении в строке.
    sed ‘s/foo/bar/4’ file.txt Заменяет foo на bar только в четвертом вхождении в строке.
    sed ‘s/foo/bar/g’ file.txt Заменяет foo на bar для всех вхождений в строке.
    sed ‘/baz/s/foo/bar/g’ file.txt Заменить foo на bar только если строка содержит baz.
    sed ‘/./,/^$/!d’ file.txt Сжать все последовательные пустые строки до одной. Пустой строки сверху не остается.
    sed ‘/^$/N;/n$/D’ file.txt Сжать все последовательные пустые строки до одной, но оставить верхнюю пустую строку.
    sed ‘/./,$!d’ file.txt Удалить все начальные пустые строки
    sed -e :a -e ‘/^n*$/<$d;N;>;/n$/ba’ file.txt Удалить все замыкающие пустые строки
    sed -e :a -e ‘/\$/N; s/\n/ /; ta’ file.txt Если строка заканчивается обратным сплешем, соединить ее со следующей (полезно для скриптов оболочки)
    sed -n ‘/regex/,+5p’ file.txt Выводит 5 строк после строки содержащей regex
    sed ‘1

    3d’ file.txt Удалить каждую третью строку, начиная с первой. sed -n ‘2

    5p’ file.txt Печатать каждую пятую строку, начиная со второй. sed ‘s/[Nn]ick/John/g’ report.txt Другой способ записи некоторых приведенных выше примеров. Вы можете предложить свой? sed -n ‘/RE/’ file.txt Печатает строку с первым соответствием RE (регулярного выражения) sed ‘0,/RE/’ file.txt Удаляет строку с первым соответствием sed ‘0,/RE/s//to_that/’ file.txt Изменяет только первое соответствие sed ‘s/^[^,]*,/9999,/’ file.csv Заменяет на 9999 все значения в первой колонке CSV-файла s/^ *(.*[^ ]) *$/|1|/; s/» *, */»|/g; : loop s/| *([^»,|][^,|]*) *, */|1|/g; s/| *, */||/g; t loop s/ *|/|/g; s/| */|/g; s/^|(.*)|$/1/; Скрипт sed для конвертирования CSV-файла в файл с вертикальной чертой в качестве разделителя (работает только с некоторыми типами CSV, со встроенными кавычками и запятыми). sed ‘:a;s/(^|[^0-9.])(1+)(2<3>)/12,3/g;ta’ file.txt Меняет формат чисел в file.txt с 1234.56 на 1.234.56 sed -r «s/ /’ Цитирует сообщение, вставляя «> » перед каждой строкой sed ‘s/^> //’ Обратная команда (убирает цитирование из сообщения) sed -e :a -e ‘s/ ]*>//g;/ Удаляет HTML-теги sed ‘/./;x;s/n/==/g’ file.txt | sort | sed ‘1s/==//;s/==/n/g’ Сортирует абзацы в file.txt в алфавитном порядке sed ‘s@/usr/bin@&/local@g’ path.txt Заменяет /usr/bin на /usr/bin/local в path.txt sed ‘s@^.*$@ >>@g’ path.txt Попробуйте и увидите 🙂 sed ‘s/(/[^:]*).*/1/g’ path.txt При условии, что path.txt содержит $PATH, выводит только первый путь в каждой строке sed ‘s/([^:]*).*/1/’ /etc/passwd Замена awk — показывает только пользователей из файла passwd echo «Welcome To The Geek Stuff» | sed ‘s/(b[A-Z])/(1)/g’ Понятно без объяснений — (W)elcome (T)o (T)he (G)eek (S)tuff sed ‘/./;x;s/n/==/g’ file.txt | sed ‘/END$/s/hills/mountains/g’ | sed ‘1s/==//;s/==/n/g’ Заменяет «hills» на «mountains», но только в блоках текста, начинающихся с пустой строки и заканчивающихся строкой с тремя символами «END», включительно. sed -e ‘/^#/d’ /etc/services | more Показывает файл services без закомментированных строк sed ‘$s@([^:]*):([^:]*):([^:]*)@3:2:1:@g’ path.txt Меняет порядок первых трех элементов в последней строке файла path.txt на обратный sed ‘/regex/’ file.txt Вставляет новую строку выше каждой строки, соответствующей регулярному выражению sed ‘/AAA/!d; /BBB/!d; /CCC/!d’ file.txt Ищет строки содержащие AAA, BBB и CCC в любом порядке sed ‘/AAA.*BBB.*CCC/!d’ file.txt Ищет строки содержащие AAA, BBB и CCC в заданном порядке sed -n ‘/^.<65>/p’ file.txt Печатает строки длиной 65 символов и более sed -n ‘/^.<65>/!p’ file.txt Печатает строки длиной 65 символов и менее sed ‘/regex/G’ file.txt Вставляет пустую строку под каждой строкой, содержащей regex sed ‘/regex/’ file.txt Вставляет пустую строку над и под каждой строкой, содержащей regex sed = file.txt | sed ‘N;s/n/t/’ Нумерует строки в file.txt sed -e :a -e ‘s/^.<1,78>$/ &/;ta’ file.txt Выровнять текст по правому краю sed -e :a -e ‘s/^.<1,77>$/ &/;ta’ -e ‘s/( *)1/1/’ file.txt Выровнять текст по центру

    В окружении UNIX: конвертируем новые строки DOS (CR/LF) в формат Unix.

    Предполагаем, что все строки оканчиваются на CR/LF

    Читайте также:  Linux пользователь для перезагрузки
    Оцените статью