Paul Troncone and Carl Albing Cybersecurity Ops with bash Attack, Defend, and Analyze from the Command Line

Глава 6. Обработка данных
109
Выводы
В.этой.главе.рассматриваются.способы.обработки.универсальных.форматов.дан-
ных,.в.числе.которых.CSV,.JSON.и.XML..Подавляющее.большинство.данных,.ко-
торые.вы.собираете.и.обрабатываете,.будут.находиться.в.одном.из.этих.форматов.
В.следующей.главе.мы.поговорим.о.том,.как.эти.данные.можно.проанализировать.
и.преобразовать.в.информацию,.которая.позволит.получить.представление.о.со-
стоянии.системы,.чтобы.управлять.процессом.принятия.решений.
Упражнения
1.. В.отношении.следующего.файла.
tasks.txt
.используйте.команду.
cut
,.чтобы.
извлечь.столбцы.1.(
Image
.
Name
),.2.(
PID
).и.5.(
Mem
.
Usage
):
Image Name;PID;Session Name;Session#;Mem Usage
System Idle Process;0;Services;0;4 K
System;4;Services;0;2,140 K
smss.exe;340;Services;0;1,060 K
csrss.exe;528;Services;0;4,756 K
2.. Для.файла.
procowner.txt
.выполните.команду.
join
,.чтобы.объединить.его.с.фай-
лом.
tasks.txt
.из.предыдущего.упражнения:
Process Owner;PID
jdoe;0
tjones;4
jsmith;340
msmith;528
3.. Используя.команду.
tr
,.замените.все.символы.с.запятой.в.файле.
tasks.txt
.сим-
волом.табуляции.и.выведите.файл.на.экране.
4.. Напишите.команду,.которая.извлекает.имена.и.фамилии.всех.авторов.из.файла.
book.json
.
Чтобы.просмотреть.дополнительные.ресурсы.и.получить.ответы.на.эти.вопросы,.
зайдите.на.сайт.
https://www.rapidcyberops.com/
.

---

7
Анализ данных
В.предыдущих.главах,.чтобы.собрать.и.подготовить.данные.к.анализу,.мы.ис-
пользовали.сценарии..Теперь.нам.нужно.разобраться.во.всех.полученных.данных..
Проанализировать.большие.объемы.данных.часто.помогает.поиск,.который.по.мере.
поступления.новых.данных.следует.постоянно.уточнять.и.ограничивать.
В.этой.главе.в.качестве.входных.данных.для.наших.сценариев.мы.возьмем.инфор-
мацию.из.журналов.веб-сервера..Все.данные.используются.для.демонстрационных.
целей..Сценарии.и.методы.можно.легко.изменить.для.работы.с.данными.практи-
чески.любого.типа.
Используемые команды
Для.сортировки.и.ограничения.отображаемых.данных.воспользуемся.командами.
sort
,.
head
.и.
uniq
..Работу.с.ними.продемонстрируем.на.файле.из.примера.7.1.
Пример 7.1.
file1.txt
12/05/2017 192.168.10.14 test.html
12/30/2017 192.168.10.185 login.html
sort
Команда.
sort
.используется.для.сортировки.текстового.файла.в.числовом.и.алфа-
витном.порядке..По.умолчанию.строки.будут.упорядочены.по.возрастанию:.сна-
чала.цифры,.затем.буквы..Буквы.верхнего.регистра,.если.не.указано.иначе,.будут.
идти.раньше.соответствующих.букв.нижнего.регистра.