Команда sed: удаление строк, содержащих строку

Чтобы удалить строки, содержащие определенную строку, из текстового файла с помощью sed, можно использовать команду sed '/pattern/d' filename.txt, где pattern - это строка, которую вы хотите сопоставить. Эта команда выведет все строки, кроме тех, которые содержат указанный шаблон, и вы можете перенаправить вывод в новый файл или использовать флаг -i для редактирования файла на месте. Для нечувствительного к регистру сопоставления добавьте флаг I: sed '/pattern/dI' filename.txt.

Содержание

• Базовый синтаксис и использование
• Распространенные методы сопоставления шаблонов
• Дополнительные параметры sed
• Практические примеры
• Устранение распространенных проблем

Базовый синтаксис и использование

Фундаментальный синтаксис для удаления строк, содержащих определенную строку, с помощью sed:

sed '/pattern/d' input_file.txt

Эта команда работает следующим образом:

• Сопоставляет строки, содержащие pattern
• Использует команду d для удаления этих совпадающих строк
• Выводит все оставшиеся строки в стандартный вывод

Шаблон может быть:

• Простая строка (например, /error/)
• Регулярное выражение (например, /^#/ для удаления строк комментариев)
• Фиксированная строка с использованием экранирования \

Чтобы сохранить вывод в новый файл:

sed '/pattern/d' input_file.txt > output_file.txt

Чтобы редактировать файл на месте (не забудьте сначала создать резервную копию!):

sed -i '/pattern/d' input_file.txt

Распространенные методы сопоставления шаблонов

Точное сопоставление строк

sed '/exact_string/d' filename.txt

Сопоставление без учета регистра

sed '/pattern/dI' filename.txt

Несколько шаблонов

# Удалить строки, содержащие любой из шаблонов
sed '/pattern1\|pattern2/d' filename.txt

Номера строк и диапазоны

# Удалить конкретный номер строки
sed '3d' filename.txt

# Удалить диапазон строк
sed '5,10d' filename.txt

# Удалить со строки 10 до конца
sed '10,$d' filename.txt

Регулярные выражения

# Удалить строки, начинающиеся с #
sed '/^#/d' filename.txt

# Удалить пустые строки
sed '/^$/d' filename.txt

# Удалить строки, содержащие цифры
sed '/[0-9]/d' filename.txt

Дополнительные параметры sed

Файлы с несколькими шаблонами

# Использовать шаблоны из файла
sed -f pattern_file.txt input_file.txt

Резервное копирование перед редактированием

# Создать резервную копию .bak перед редактированием на месте
sed -i.bak '/pattern/d' filename.txt

Тихий режим работы

# Подавить вывод (полезно для скриптов)
sed -n '/pattern/dp' filename.txt

Расширенные регулярные выражения

# Использовать расширенные регулярные выражения для более сложных шаблонов
sed -E '/pattern[0-9]+/d' filename.txt

Практические примеры

Пример 1: Очистка файла журнала

# Удалить строки ERROR из файла журнала
sed '/ERROR/d' application.log > clean_log.log

Пример 2: Очистка файла конфигурации

# Удалить закомментированные строки (начинающиеся с # или ;)
sed -E '/^#|^;/d' config.ini

Пример 3: Обработка данных

# Удалить строки, содержащие "temp" или "debug"
sed '/temp\|debug/d' data.csv

Пример 4: Обработка HTML

# Удалить пустые HTML-теги
sed -E '/<[^>]*><\/[^>]*>/d' webpage.html

Пример 5: Системное администрирование

# Удалить отключенные службы из конфигурации systemd
sed '/^#|^Enabled=no/d' services.conf

Устранение распространенных проблем

Специальные символы в шаблонах

Когда шаблоны содержат специальные символы регулярных выражений, экранируйте их:

# Удалить строки, содержащие "file.txt"
sed '/file\.txt/d' filename.txt

Производительность при работе с большими файлами

Для очень больших файлов используйте более эффективные подходы:

# Сначала использовать grep для поиска номеров строк, затем sed
grep -n "pattern" filename.txt | cut -d: -f1 | xargs -I {} sed -i "{}d" filename.txt

Сохранение исходной структуры файла

Всегда создавайте резервную копию перед редактированием на месте:

# Безопасный подход с резервным копированием
cp original.txt original.txt.bak
sed -i '/pattern/d' original.txt

Отладка сопоставления шаблонов

Проверяйте ваш шаблон перед применением:

# Показать, какие строки будут удалены
sed -n '/pattern/p' filename.txt

# Показать номера строк с совпадениями
grep -n "pattern" filename.txt

Источники

1. Руководство GNU sed - Команда d
2. Учебник по sed - Удаление строк
3. Регулярные выражения в sed
4. Продвинутые техники sed

Заключение

Удаление строк, содержащих определенные строки, с помощью sed - это мощная техника обработки текста, которую должен освоить каждый пользователь Linux/Unix. Базовая команда sed '/pattern/d' предоставляет простой, но гибкий способ фильтрации текстовых файлов, а такие опции, как -i для редактирования на месте и -I для сопоставления без учета регистра, расширяют ее универсальность. Помните всегда создавать резервные копии важных файлов перед использованием редактирования на месте и сначала проверяйте ваши шаблоны на небольших выборках. Для сложных операций рассмотрите возможность объединения sed с другими инструментами, такими как grep или awk, для более сложных рабочих процессов обработки текста.