Описание тега uniq

1 ответ

Опция -f для команды linux

Это содержимое тестового файла: this this this that is that a that MAP that map that когда я делаю uniq testCase -f1результат: this this this that что разумно, но если я бегу: testCase -f2, Я получил: this this почему это происходит? и может кто-ниб…
24 апр '11 в 16:48
2 ответа

Сортировка по идентификатору, затем сортировка по дате, затем удаление строк, которые имеют более старую дату?

У меня есть несколько файлов с разделителями табуляции. Каждый файл структурирован так: ID Title Rating Date_Rated То, что я хочу сделать, это объединить все эти файлы в один и сохранить только последний рейтинг. file1 может иметь такие данные, как:…
22 фев '15 в 02:55
1 ответ

Grep совпадающие строки, но возвращающие совпадающие идентификаторы ключей в выводе GnuPG

Имея этот вход: rsa2048/C7927B82 2015-08-30 rsa2048/FB2D99F9 2015-08-30 Я хочу, чтобы grep возвращал только идентификатор ключа, например: C7927B92, Использование шаблона из символов Grep до и после матча? , Я использовал grep -o -P 'rsa.{3,13}' в р…
31 авг '15 в 20:29
1 ответ

Удалить список элементов из другого файла в bash

Каков наиболее эффективный метод (без повторного выполнения команды) для удаления элементов, перечисленных в одном файле, из другого файла (неупорядоченный)? Можно легко получить список несоответствующих элементов во втором файле, cat first_file.txt…
16 сен '15 в 14:14
1 ответ

gnu `uniq -c`: графическое отображение в виде столбцов

С sort $file | uniq -c, можно суммировать файлы / ввод и показывать число таких случаев: 13 foo 1 bar Чтобы лучше понять эти данные, я хотел бы видеть их графически, как это делает git при отображении изменений (++++++++--): ------------ foo - bar -…
12 мар '12 в 09:43
1 ответ

Подсчет дубликатов строк из потока

В настоящее время я анализирую журналы apache с помощью этой команды: tail -f /opt/apache/logs/access/gvh-access_log.1365638400 | grep specific.stuff. | awk '{print $12}' | cut -d/ -f3 > ~/logs Вывод представляет собой список доменов: www.domain1…
11 апр '13 в 09:05
1 ответ

Сортировать по трубопроводу, чтобы UniQ неожиданный вывод

У меня есть файл, который выглядит так: "string",192.168.1.0,,TX,192.168.1.2,,,100,0,0,10,10,10,, "string",192.168.1.0,,TX,192.168.1.1,,,100,0,0,10,10,10,, "string",192.168.1.0,,TX,192.168.1.4,,,100,0,0,10,10,10,, "string",192.168.1.0,,TX,192.168.1.…
08 авг '14 в 16:05
2 ответа

Сортировка файлов по частоте "содержание строки" - печать дубликатов

Представь, что есть файл - a b b b b c c d d d Я хочу, чтобы выходные данные были отсортированы по частоте (я хочу, чтобы дублированные строки также печатались), а также - b b b b d d d c c a
25 авг '18 в 19:23
3 ответа

Есть ли Windows, эквивалентный Unix Uniq?

Мне нужно удалить дубликаты строк из текстового файла, это просто в Linux, используя cat file.txt |sort | uniq когда file.txt содержит aaa bbb aaa ccc Будет выводить aaa bbb ccc Есть ли аналог Windows? или как это сделать в Windows?
23 апр '18 в 00:35
2 ответа

Как сделать так, чтобы uniq рассматривал только первое поле?

Я использую FreeBSD 3.2-RELEASE Если у меня есть какой-то отсортированный текст, как это last выход- zikla13:Oct:20:22:34 zikla13:Oct:5:00:31 zikla14:Oct:17:22:01 zikla14:Oct:12:23:35 zikla14:Oct:12:23:34 zikla14:Oct:12:00:11 zikla14:Oct:11:23:52 zi…
27 окт '15 в 21:35
3 ответа

Фильтрация 2-го поля из набора данных и затем использование uniq на выходе

У меня есть набор данных, который выглядит так: AAAAA 11111 Data1 AAAAA 11111 Data2 AAAAA 11111 Data3 AAAAA 11112 Data4 AAAAA 11112 Data5 AAAAA 11112 Data6 AAAAA 11112 Data7 AAAAA 11113 Data8 AAAAA 11114 Data9 И так далее. Я хочу отфильтровать в соо…
04 янв '15 в 21:28
1 ответ

gnu sort/uniq: сортировка по количеству раз

Как я могу использовать GNU sort а также uniq иметь наиболее распространенные вхождения вместо числовой или буквенно-цифровой сортировки? пример list.txt: 1 2 2 2 3 3 Поскольку "2" встречается 3 раза, должно быть сверху, затем "3" и "1" следующим об…
24 янв '12 в 15:58
1 ответ

Grep на macOS: найдите уникальные вхождения группы захвата в регулярном выражении

Я нахожусь на macOS и хотел бы начать использовать grep (или аналогичный инструмент), чтобы найти уникальные вхождения определенного шаблона в кодовой базе. Например, для поиска всех console.somemethod() звонки в JavaScript, которые я разработал: gr…
06 сен '18 в 09:51
1 ответ

Как я могу отфильтровать уникальные строки на основе подстроки?

Если у меня есть набор URL-адресов в файле, как: http://example.com/do?foo=bar&etc;=123 http://example.com/do?etc=456&foo;=bar Я хочу отфильтровать это так, чтобы для каждого уникального значения параметра 'foo' был только один URL. Остальная часть …
08 апр '16 в 18:00
3 ответа

Удалить дубликаты в каждой строке файла

Как я могу удалить дубликаты в каждой строке, например, здесь? 1 1 1 2 1 2 3 5 5 4 1 2 3 3 Я хотел бы получить этот вывод: 1 2 3 5 4 1 2 3 Есть много строк (100 000), и в каждой строке я хочу уникальные значения. Perl может быть самым быстрым, но ка…
19 дек '12 в 17:05
1 ответ

Как распечатать статистику из строк в файле

Я часто нахожу себя вычисляя проценты вручную после фильтрации через файл журнала, чтобы найти долю X или Y в нем. Может ли это быть легко достигнуто с помощью обычных инструментов CLI?
22 ноя '13 в 10:47
1 ответ

Печать уникальных строк с помощью uniq, OS X Yosemite

Я пытаюсь напечатать уникальные записи в столбце .csv файл. Для этого я попробовал следующее: awk -F "," '{print $6}' dataCoarse.csv | uniq -u который просто печатает 6-й столбец как есть. Есть все еще повторяющиеся записи. Как я могу печатать тольк…
06 апр '15 в 15:33
2 ответа

Найти количество команд из файла

Я начал изучать bash совсем недавно, и мне нужно найти количество команд из файла, файл можно скачать по этой ссылке. Ниже образец Я понимаю, что я должен использовать cut и uniq, но я не могу понять, как. Любая помощь приветствуется.
12 мар '18 в 10:24
3 ответа

Удалить не повторяющиеся строки в Linux

Как я могу удалить не дублирующиеся строки из текстового файла, используя любую программу linux linke sed, awk или любую другую? Пример: abc bbc abc bbc ccc bbc Результат: abc bbc abc bbc bbc Второй список удалил ccc, потому что в нем не было повтор…
02 авг '16 в 05:56
2 ответа

Одинаковые строки, кроме первого слова, поместите первое слово в переменную

У меня есть файл (sudoers), в котором строки могут быть идентичны, за исключением первого слова в них (разные пользователи могут выполнять один и тот же набор команд). Я могу извлечь такую ​​строку с помощью команды: # grep -v '^ *%' /etc/sudoers |e…
17 июл '11 в 08:48