Вопросы по теме 'uniq'
cygwin uniq не работает
Учитывая следующий отсортированный файл (myfile.txt):
http://quarterly.mayo.edu/photoListing/default.cfm?summary=&displaymode=&reporting_unit_code=...
552 просмотров
schedule
20.09.2021
BASH - Найдите дубликаты в нескольких файлах
У меня есть несколько файлов в одном каталоге, каждый файл представляет пользователя и содержит IP-адреса, используемые для входа в эту учетную запись, каждый в новой строке.
Я хочу создать сценарий, который будет проверять, встречается ли один и...
1362 просмотров
schedule
01.12.2021
Сортировать первый столбец при объединении второго столбца
Ищу решение следующей проблемы. У меня есть текстовый файл с идентификаторами генов в первом столбце, а во втором - GOterms. Поскольку каждый ген имеет несколько аннотированных GOterms, идентичные geneID встречаются несколько раз (с разными GOterms...
36 просмотров
schedule
29.10.2021
Ruby 1.8.6 Array#uniq не удаляет повторяющиеся хэши
У меня есть этот массив в консоли ruby 1.8.6:
arr = [{:foo => "bar"}, {:foo => "bar"}]
оба элемента равны друг другу:
arr[0] == arr[1]
=> true
#just in case there's some "==" vs "===" oddness...
arr[0] === arr[1]
=> true...
183 просмотров
schedule
19.06.2022
RoR ActiveRecord::Base uniq undefined при попытке uniq.pluck(:column_name)
поэтому у меня есть очень простая модель под названием Movies. Я пытаюсь добавить метод класса, который возвращает аккуратный список рейтингов, присвоенных фильмам в базе данных. Кажется, я хочу позвонить Movie.uniq.pluck(:rating)
Итак, я...
2260 просмотров
schedule
20.07.2022
Как я могу сохранить только неповторяющиеся строки в файле?
Я хочу просто сохранить строки, которые не повторяются, в огромном файле, например:
..
a
b
b
c
d
d
..
Тогда желаемый результат:
..
a
c
..
Спасибо заранее.
878 просмотров
schedule
26.07.2022
Даже после сортировки uniq продолжает повторять некоторые значения.
Справочный файл: http://snap.stanford.edu/data/wiki-Vote.txt.gz
(Это ленточный архив, содержащий файл с именем Wiki-Vote.txt )
Первые несколько строк в файле, содержащем следующее: head -n 10 Wiki-Vote.txt
# Directed graph (each...
86 просмотров
schedule
16.08.2022
bash добавить столбцы с тем же первым столбцом
У меня есть файл с именем в первом столбце и количеством во втором столбце. Он отсортирован по имени.
dan 3355
dan 667
dan 889
frank 8
frank 99
frank 90
ian 9
Я хотел бы объединить все одинаковые имена и вывести...
1854 просмотров
schedule
12.09.2022
UNIX: использование comm без создания временных файлов
Я хотел использовать comm для сравнения двух списков: один состоит из случайно сгенерированных слов:
cat /dev/urandom | head -n 10000 | strings | tr 'A-Z' 'a-z' | sort
другой - английский словарь:
wget -q0- <URL> | sort
(Я...
646 просмотров
schedule
15.09.2022
Как выбрать уникальные элементы
Я хотел бы расширить класс Array с помощью метода uniq_elements , который возвращает эти элементы с кратностью один. Я также хотел бы использовать замыкания для моего нового метода, как в случае с uniq . Например:...
2292 просмотров
schedule
11.09.2022
С помощью команды linux sort -f | uniq -i вместе для игнорирования регистра
Я пытаюсь найти уникальные и повторяющиеся данные в списке данных с двумя столбцами. Я действительно просто хочу сравнить данные в столбце 1.
Данные могут выглядеть так (разделенные табуляцией):
What are you doing? Che cosa stai facendo?...
12295 просмотров
schedule
22.09.2022
Использование awk для получения максимального значения столбца для каждого уникального значения другого столбца
Итак, у меня есть файл, например:
10 1 abc
10 2 def
10 3 ghi
20 4 elm
20 5 nop
20 6 qrs
30 3 tuv
Я хотел бы получить максимальное значение второго столбца для каждого значения первого столбца, т.е.:
10 3 ghi
20 6 qrs
30 3 tuv
Как я...
3830 просмотров
schedule
05.10.2022
сортировка и уникальные CSV-файлы
используя команды linux, у меня есть CSV-файл в кавычках, который я отсортировал по первому столбцу, а затем по второму столбцу, теперь я хочу удалить дубликаты, где они совпадают в первом и втором столбце, как это можно сделать? uniq кажется...
1492 просмотров
schedule
14.12.2022
Удалить дубликаты из большого файла
У меня есть CSV-файл ~ 20 ГБ. Образец файла:
1,[email protected],M
2,[email protected],M
1,[email protected],F
3,[email protected],F
Первичным ключом в этом файле является первый столбец. Мне нужно написать два файла, uniq.csv и дубликаты.csv
uniq.csv должен содержать все...
3872 просмотров
schedule
28.09.2023
Изменение разделителя команды uniq
Я бы хотел, чтобы вывод команды uniq был разделен запятыми, чтобы вместо:
30 hello
31 world
36 hey_there
142 i_am_bigest
Я получу:
30,hello
31,world
36,hey_there
142,i_am_biggest
В моем вводе нет пробелов, но...
10349 просмотров
schedule
13.12.2022
Вывести всю строку один раз для каждого уникального значения столбца в соответствии со значением второго столбца
Мой вопрос очень похож на этот ранее заданный вопрос:
Вывод всей строки один раз для каждого уникального значения столбца (Bash)
но с одним существенным отличием. В его примере:
pep> AEYTCVAETK 2 genes...
67 просмотров
schedule
16.05.2023
Почему sort -u дает другой результат от sort имя файла | уникальный -у?
Я получаю два разных результата для следующих команд. Хотите знать разницу между этими командами. Я хочу перечислить уникальные строки (удалить дубликаты) в файле. Чтобы разобраться, я использовал следующие команды.
sort -u filename
а...
401 просмотров
schedule
13.02.2023
`uniq` не работает должным образом
У меня есть файл с именем "test.txt", который выглядит так:
10
10
10
8
10
9
10
10
9
10
8
По какой-то причине, когда я запустил uniq test.txt , я получил такой вывод:
10
8
10
9
10
9
10
8
Почему я получаю этот вывод? Я использую BSD...
4241 просмотров
schedule
23.10.2022
найти уникальные строки только на основе одного поля
Есть ли простой способ найти уникальные строки в файле (возможно, переключатель для uniq ?), но только с учетом определенной строки/поля?
Например, учитывая следующее:
1-3172 gi|493665175|dbj|AP012055.1| 100.000 136 0 0 115 250 64464...
36 просмотров
schedule
27.02.2023
Как получить уникальные строки из очень большого файла в Linux?
У меня очень большой файл данных (255G; 3 192 563 934 строки). К сожалению, у меня только 204 ГБ свободного места на устройстве (и никаких других устройств, которые я могу использовать). Я сделал случайную выборку и обнаружил, что в заданных,...
5217 просмотров
schedule
24.11.2022