The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"sed, удаление строк"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Программирование под UNIX (Shell скрипты)
Изначальное сообщение [ Отслеживать ]

"sed, удаление строк"  +/
Сообщение от renton email(ok) on 26-Авг-08, 14:28 
Привет друзья.

Нужна ваша помощь по sed'у.

В тексте требуется удалить строки перед регулярным выражением и после, ну и само совпадение.
Удаление по рег. выражению, понятно, просто:
sed '/regexp/d'
но дальше, что-то никак.

Подозреваю, что нужно как-то воспользоваться командами x,h,b, но вот как их сюда прикрутить, непонятно.

Высказать мнение | Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "sed, удаление строк"  +/
Сообщение от madskull (??) on 26-Авг-08, 16:43 
Прикольная задачка.
Сделал вот так
cat file| sed -n '/regexp/{g;s/\(.*\)\n.*/\1/;h;${b2};N;b1};H;:1;${:2;g;s/\n//;p}'

вроде правильно отрабатывает найденное и в первых и в последних строках.

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

2. "sed, удаление строк"  +/
Сообщение от renton email(ok) on 26-Авг-08, 17:17 
>cat file| sed -n '/regexp/{g;s/\(.*\)\n.*/\1/;h;${b2};N;b1};H;:1;${:2;g;s/\n//;p}'

Как обычно, круто!
Спасибо.

Если вас не затруднит объясните, пожалуйста, что тут sed делает со всеми этими командами.

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

3. "sed, удаление строк"  +/
Сообщение от madskull (??) on 26-Авг-08, 17:36 
>>cat file| sed -n '/regexp/{g;s/\(.*\)\n.*/\1/;h;${b2};N;b1};H;:1;${:2;g;s/\n//;p}'
>
>Как обычно, круто!
>Спасибо.
>
>Если вас не затруднит объясните, пожалуйста, что тут sed делает со всеми
>этими командами.

/regexp/{  # если встречается искомое
    g; s/\(.*\)\n.*/\1/; h  # достать из hold текст, отрезать последнюю строку (она предыдущая к искомой) и положить обратно
    ${b2}   #  если это последняя строка - к окончательной обработке текста
    N;b1  # скипаем следующую после искомой
}
H # все остальные строки - в hold
:1
${ # последняя строка - печатаем текст
    :2
    g; s/\n//; p # достаем, отрезаем первый (добавленный командой H) конец строки и печатаем
}  

see also: pinfo sed


Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

4. "sed, удаление строк"  +/
Сообщение от Andrey Mitrofanov on 26-Авг-08, 17:53 
>    g; s/\(.*\)\n.*/\1/; h  # достать из hold
>текст, отрезать последнюю строку (она предыдущая к искомой) и положить обратно

Ничего $) не понимаю в sed, но интересуюсь B^) ...
str1
str2
regexp 1
str3
regexp 2
str4
..."str1" не переживёт "катаклизма", задавленная regexp-ом #2 ? :)

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

5. "sed, удаление строк"  +/
Сообщение от madskull (??) on 26-Авг-08, 18:05 
>[оверквотинг удален]
>>текст, отрезать последнюю строку (она предыдущая к искомой) и положить обратно
>
>Ничего $) не понимаю в sed, но интересуюсь B^) ...
>str1
>str2
>regexp 1
>str3
>regexp 2
>str4
>..."str1" не переживёт "катаклизма", задавленная regexp-ом #2 ? :)

угу, никто не выживет

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

6. "sed, удаление строк"  +/
Сообщение от renton email(ok) on 27-Авг-08, 15:02 
>/regexp/{  # если встречается искомое ...

Кстати, я реально затупил.
У меня в тексте всегда одинаковые строки перед и после шаблона, т.е.

строка1
шаблон
строка2
blabla
blabla
...
строка1
шаблон
строка2

наверно можно было просто написать /строка1\nшаблон\nстрока2/d

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

7. "sed, удаление строк"  +/
Сообщение от madskull (??) on 27-Авг-08, 15:10 
>[оверквотинг удален]
>шаблон
>строка2
>blabla
>blabla
>...
>строка1
>шаблон
>строка2
>
>наверно можно было просто написать /строка1\nшаблон\nстрока2/d

Ничего, зато размялись.
А в этом случае подойдет sed '/строка1/,+2d'

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

8. "sed, удаление строк"  +/
Сообщение от Sparc email(??) on 19-Авг-10, 14:47 
Доброго времени суток!

Есть задачка по sed-у(сам второй день бьюсь:)):

Есть файл с текстом примерно такого содержания:
_____________________________________________________________________________________
date,          time ,    name,   port,      ID,                IP                    
08/16/2010, 19:06:23, Door@3d<>$, 44, CORE_0.0:868311000, 195.189.249.58            
08/16/2010, 19:06:33, Door@3d<>$, 46, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 19:07:14, Door@3d<>$, 55, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 19:11:11, Door@3d<>$, 78, KERN_ID_LAN, 195.189.249.58                    
08/16/2010, 19:17:25, Ford, 90, KERN_ID_LAN, 195.191.13.6                            
08/16/2010, 19:19:11, Achilles, 95, KERN_ID_LAN, 195.140.228.30                      
08/16/2010, 19:44:08, Head, 167, CORE_ID_LAN, 195.135.237.20                          
08/16/2010, 19:06:33, Door@3d<>$, 46, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 19:07:14, Door@3d<>$, 55, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 19:11:11, Door@3d<>$, 78, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 19:45:14, Head, 1344, CORE_ID_LAN, 195.135.237.20                        
08/16/2010, 19:51:50, Head, 20322, CORE_ID_LAN, 195.135.237.20                        
08/16/2010, 19:06:33, Door@3d<>$, 46, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 19:07:14, Door@3d<>$, 55, CORE_0.0:868311000, 195.189.249.58              
08/16/2010, 20:07:42, Aux fgj&$FGf, 241, CORE_ID_LAN, 195.242.114.93                
08/16/2010, 20:09:58, Help!! pls!!, 251, CORE_ID_LAN, 195.242.114.93                  
08/16/2010, 20:14:20, Head, 254, CORE_ID_LAN, 195.135.237.21                        
08/16/2010, 20:18:50, dflkgjdfklg$%#$^, 265, CORE_0.0:51080034, 195.216.210.240      
08/16/2010, 19:07:14, Openeddoor, 55, CORE_0:0:868311000, 195.189.249.58            
08/16/2010, 19:07:14, Openeddoor, 55, CORE_0:0:868311000, 195.189.249.58              
08/16/2010, 19:07:14, Openeddoor, 55, CORE_0:0:868311000, 195.189.249.58              
08/16/2010, 19:11:11, ClosedDoor<>$, 78, CORE_0:0:868311000, 195.189.249.58          
_____________________________________________________________________________________|

примечание:
первой строки в файле нет, вписал для восприятия(это всё потом в БД пойдёт).
поля Date, Time, Port - различны во всех строках.
Name - любой набор символов.

задача:
Необходимо удалить, оставив только одну, повторяющиеся строки только с одинаковыми Name, ID, IP.
Эти строки могут идти не последовательно, а по всему тексту в разброс или пачками.

В идеале должно получиться примерно так:
_____________________________________________________________________________________
date,          time ,    name,   port,      ID,                IP                    
08/16/2010, 19:06:23, Door@3d<!>$, 44, CORE_0.0:868311000, 195.189.249.58            
08/16/2010, 19:11:11, Door@3d<>$, 78, KERN_ID_LAN, 195.189.249.58                    
08/16/2010, 19:17:25, Ford, 90, KERN_ID_LAN, 195.191.13.6                            
08/16/2010, 19:19:11, Achilles, 95, KERN_ID_LAN, 195.140.228.30                      
08/16/2010, 19:44:08, Head, 167, CORE_ID_LAN, 195.135.237.20                          
08/16/2010, 20:07:42, Aux fgj&$FGf, 241, CORE_ID_LAN, 195.242.114.93                  
08/16/2010, 20:09:58, Help!! pls!!, 251, CORE_ID_LAN, 195.242.114.93                  
08/16/2010, 20:14:20, Head, 254, CORE_ID_LAN, 195.135.237.21                          
08/16/2010, 20:18:50, dflkgjdfklg$%#$^, 265, CORE_0.0:51080034, 195.216.210.240      
08/16/2010, 19:07:14, Openeddoor, 55, CORE_0:0:868311000, 195.189.249.58              
08/16/2010, 19:11:11, ClosedDoor<>$, 78, CORE_0:0:868311000, 195.189.249.58          
_____________________________________________________________________________________|

Спасибо за помощь! :) :beer:

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

9. "sed, удаление строк"  +/
Сообщение от phpcoder email(ok) on 19-Авг-10, 15:06 
sort -t, -k3 -k5 -k6 in.txt | uniq -f1 -f2 -f4

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

10. "sed, удаление строк"  +/
Сообщение от SuN email(ok) on 19-Авг-10, 15:58 
>sort -t, -k3 -k5 -k6 in.txt | uniq -f1 -f2 -f4

https://www.opennet.ru/openforum/vsluhforumID9/8833.html - ссылка на основную тему

Высказать мнение | Ответить | Правка | ^ | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Спонсоры:
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2021 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру