Введение в команду AWK с примерами и пояснениями

 

 

 

Важное замечание по экранированию символа $ в Debian и подобных дистрибутивах:
В большинстве документации и примеров для awk можно встретить запись с экранированием символа $ — например, \$1, \$3 и т.д. Это нужно в некоторых оболочках или системах для предотвращения подстановки переменных оболочкой.

Однако в Debian и большинстве современных Linux-дистрибутивов при использовании одинарных кавычек ('...') экранировать $ не требуется.
Таким образом, запись вида

awk -F: '\$3 >= 1000 { print \$1 }' /etc/passwd
> 

следует писать проще и корректнее как

awk -F: '$3 >= 1000 { print $1 }' /etc/passwd
> 

Это упрощает запись и улучшает читаемость команд.

---

Основы синтаксиса

Общий вид команды:

awk 'условие {действие}' файл

• условие — выражение, определяющее, к каким строкам применять действие.
• действие — набор команд, выполняемых для строк, удовлетворяющих условию.
• Если условие опущено, действие выполняется для всех строк.
• Если действие опущено, по умолчанию выводится вся строка.

---

Разделение полей

По умолчанию awk разбивает каждую строку на поля, разделённые пробелом или табуляцией.

• $0 — вся строка целиком.
• $1 — первое поле.
• $2 — второе поле.
• и так далее.

Можно изменить разделитель полей с помощью опции -F или внутри программы, задав переменную FS.

---

Примеры использования

1. Вывод определённого столбца

Вывести первый столбец файла /etc/passwd (имена пользователей):

awk -F: '{ print $1 }' /etc/passwd

Здесь разделитель -F: — двоеточие, так как поля в /etc/passwd разделены двоеточиями.

---

2. Фильтрация строк по условию

Вывести строки, где третий столбец (UID) больше или равен 1000:

awk -F: '$3 >= 1000 { print $0 }' /etc/passwd

Можно опустить { print $0 }, так как по умолчанию выводится вся строка:

awk -F: '$3 >= 1000' /etc/passwd

---

3. Суммирование значений

Посчитать сумму чисел во втором столбце файла data.txt:

awk '{ sum += $2 } END { print sum }' data.txt

• sum += $2 — для каждой строки добавляем значение второго поля к переменной sum.
• END { print sum } — после обработки всех строк выводим сумму.

---

4. Использование переменных и условий

Вывести строки, где значение второго поля больше 50, и показать только первое и второе поле:

awk '$2 > 50 { print $1, $2 }' data.txt

---

5. Форматированный вывод

Вывести имя пользователя и UID из /etc/passwd с форматированием:

awk -F: '{ printf "User: %s, UID: %d\n", $1, $3 }' /etc/passwd

---

Полезные переменные awk

• NR — номер текущей обрабатываемой строки.
• NF — количество полей в текущей строке.
• FS — разделитель полей (input field separator).
• OFS — разделитель полей при выводе (output field separator).

---

Пример сложной задачи

Вывести имена пользователей и их полные имена (GECOS) только для обычных пользователей с UID от 1000 до 65533:

awk -F: '$3 >= 1000 && $3 < 65534 { print $1, "-", $5 }' /etc/passwd

---

Заключение

awk — универсальный инструмент для обработки текстовых данных. Он позволяет быстро фильтровать, преобразовывать и анализировать данные, используя простой, но мощный язык программирования. Освоение awk значительно расширит ваши возможности работы с текстовыми файлами в Linux.

 

 

 

 

 

---

---