Вопросы по теме 'uniq'

cygwin uniq не работает
Учитывая следующий отсортированный файл (myfile.txt): http://quarterly.mayo.edu/photoListing/default.cfm?summary=&displaymode=&reporting_unit_code=...
552 просмотров
schedule 20.09.2021

BASH - Найдите дубликаты в нескольких файлах
У меня есть несколько файлов в одном каталоге, каждый файл представляет пользователя и содержит IP-адреса, используемые для входа в эту учетную запись, каждый в новой строке. Я хочу создать сценарий, который будет проверять, встречается ли один и...
1362 просмотров
schedule 01.12.2021

Сортировать первый столбец при объединении второго столбца
Ищу решение следующей проблемы. У меня есть текстовый файл с идентификаторами генов в первом столбце, а во втором - GOterms. Поскольку каждый ген имеет несколько аннотированных GOterms, идентичные geneID встречаются несколько раз (с разными GOterms...
36 просмотров
schedule 29.10.2021

Ruby 1.8.6 Array#uniq не удаляет повторяющиеся хэши
У меня есть этот массив в консоли ruby ​​1.8.6: arr = [{:foo => "bar"}, {:foo => "bar"}] оба элемента равны друг другу: arr[0] == arr[1] => true #just in case there's some "==" vs "===" oddness... arr[0] === arr[1] => true...
183 просмотров
schedule 19.06.2022

RoR ActiveRecord::Base uniq undefined при попытке uniq.pluck(:column_name)
поэтому у меня есть очень простая модель под названием Movies. Я пытаюсь добавить метод класса, который возвращает аккуратный список рейтингов, присвоенных фильмам в базе данных. Кажется, я хочу позвонить Movie.uniq.pluck(:rating) Итак, я...
2260 просмотров
schedule 20.07.2022

Как я могу сохранить только неповторяющиеся строки в файле?
Я хочу просто сохранить строки, которые не повторяются, в огромном файле, например: .. a b b c d d .. Тогда желаемый результат: .. a c .. Спасибо заранее.
878 просмотров
schedule 26.07.2022

Даже после сортировки uniq продолжает повторять некоторые значения.
Справочный файл: http://snap.stanford.edu/data/wiki-Vote.txt.gz (Это ленточный архив, содержащий файл с именем Wiki-Vote.txt ) Первые несколько строк в файле, содержащем следующее: head -n 10 Wiki-Vote.txt # Directed graph (each...
86 просмотров
schedule 16.08.2022

bash добавить столбцы с тем же первым столбцом
У меня есть файл с именем в первом столбце и количеством во втором столбце. Он отсортирован по имени. dan 3355 dan 667 dan 889 frank 8 frank 99 frank 90 ian 9 Я хотел бы объединить все одинаковые имена и вывести...
1854 просмотров
schedule 12.09.2022

UNIX: использование comm без создания временных файлов
Я хотел использовать comm для сравнения двух списков: один состоит из случайно сгенерированных слов: cat /dev/urandom | head -n 10000 | strings | tr 'A-Z' 'a-z' | sort другой - английский словарь: wget -q0- <URL> | sort (Я...
646 просмотров
schedule 15.09.2022

Как выбрать уникальные элементы
Я хотел бы расширить класс Array с помощью метода uniq_elements , который возвращает эти элементы с кратностью один. Я также хотел бы использовать замыкания для моего нового метода, как в случае с uniq . Например:...
2292 просмотров
schedule 11.09.2022

С помощью команды linux sort -f | uniq -i вместе для игнорирования регистра
Я пытаюсь найти уникальные и повторяющиеся данные в списке данных с двумя столбцами. Я действительно просто хочу сравнить данные в столбце 1. Данные могут выглядеть так (разделенные табуляцией): What are you doing? Che cosa stai facendo?...
12295 просмотров
schedule 22.09.2022

Использование awk для получения максимального значения столбца для каждого уникального значения другого столбца
Итак, у меня есть файл, например: 10 1 abc 10 2 def 10 3 ghi 20 4 elm 20 5 nop 20 6 qrs 30 3 tuv Я хотел бы получить максимальное значение второго столбца для каждого значения первого столбца, т.е.: 10 3 ghi 20 6 qrs 30 3 tuv Как я...
3830 просмотров
schedule 05.10.2022

сортировка и уникальные CSV-файлы
используя команды linux, у меня есть CSV-файл в кавычках, который я отсортировал по первому столбцу, а затем по второму столбцу, теперь я хочу удалить дубликаты, где они совпадают в первом и втором столбце, как это можно сделать? uniq кажется...
1492 просмотров
schedule 14.12.2022

Удалить дубликаты из большого файла
У меня есть CSV-файл ~ 20 ГБ. Образец файла: 1,[email protected],M 2,[email protected],M 1,[email protected],F 3,[email protected],F Первичным ключом в этом файле является первый столбец. Мне нужно написать два файла, uniq.csv и дубликаты.csv uniq.csv должен содержать все...
3872 просмотров
schedule 28.09.2023

Изменение разделителя команды uniq
Я бы хотел, чтобы вывод команды uniq был разделен запятыми, чтобы вместо: 30 hello 31 world 36 hey_there 142 i_am_bigest Я получу: 30,hello 31,world 36,hey_there 142,i_am_biggest В моем вводе нет пробелов, но...
10349 просмотров
schedule 13.12.2022

Вывести всю строку один раз для каждого уникального значения столбца в соответствии со значением второго столбца
Мой вопрос очень похож на этот ранее заданный вопрос: Вывод всей строки один раз для каждого уникального значения столбца (Bash) но с одним существенным отличием. В его примере: pep> AEYTCVAETK 2 genes...
67 просмотров
schedule 16.05.2023

Почему sort -u дает другой результат от sort имя файла | уникальный -у?
Я получаю два разных результата для следующих команд. Хотите знать разницу между этими командами. Я хочу перечислить уникальные строки (удалить дубликаты) в файле. Чтобы разобраться, я использовал следующие команды. sort -u filename а...
401 просмотров
schedule 13.02.2023

`uniq` не работает должным образом
У меня есть файл с именем "test.txt", который выглядит так: 10 10 10 8 10 9 10 10 9 10 8 По какой-то причине, когда я запустил uniq test.txt , я получил такой вывод: 10 8 10 9 10 9 10 8 Почему я получаю этот вывод? Я использую BSD...
4241 просмотров
schedule 23.10.2022

найти уникальные строки только на основе одного поля
Есть ли простой способ найти уникальные строки в файле (возможно, переключатель для uniq ?), но только с учетом определенной строки/поля? Например, учитывая следующее: 1-3172 gi|493665175|dbj|AP012055.1| 100.000 136 0 0 115 250 64464...
36 просмотров
schedule 27.02.2023

Как получить уникальные строки из очень большого файла в Linux?
У меня очень большой файл данных (255G; 3 192 563 934 строки). К сожалению, у меня только 204 ГБ свободного места на устройстве (и никаких других устройств, которые я могу использовать). Я сделал случайную выборку и обнаружил, что в заданных,...
5217 просмотров
schedule 24.11.2022