uniq 相关问题

uniq是一个Unix / POSIX / Linux实用程序，用于从已排序的文件中删除或过滤重复的行。它也是从Ruby中的数组中删除重复项的方法的名称。

比较两个具有相同ID的文件，减去并添加到行尾

我有2个文件，格式为文件A 01 20200111 28.56 22.07 40.14 49.79 22.81 49.31 33.75 31.24 39.41 36.18 02 20200118 32.41 14.89 38.82 60.54 11.54 49.10 34.34 25.53 36....

awk compare uniq

回答 1 投票 0

比较具有相同 id 和减去字段的两个文件

我有2个文件，格式为文件A 01 20200111 28.56 22.07 40.14 49.79 22.81 49.31 33.75 31.24 39.41 36.18 02 20200118 32.41 14.89 38.82 60.54 11.54 49.10 34.34 25.53 36....

awk compare uniq

回答 1 投票 0

查找数组中的重复项，并按对打印计数

我有一个值、位置对数组 arr =（测试，元我，亚马逊测试，亚马逊这个，元测试，谷歌我，谷歌你好，微软）我想打印重复值，它们的数量/计数，沿着...

arrays bash awk uniq

回答 2 投票 0

Linux shell 中的排序和 uniq

以下两个命令有什么区别？排序 -u 文件排序文件 |优衣库

linux shell sorting uniq

回答 6 投票 0

删除重复行而不排序[重复]

我有一个Python实用程序脚本： #!/usr/bin/env python 导入系统唯一行= [] 重复行= [] 对于 sys.stdin 中的行：如果行位于 unique_lines 中：重复行.追加（行）否则...

shell scripting filter uniq

回答 8 投票 0

打印文件中没有重复项的行并保留排序顺序 linux

我有以下文件： 1 2 4 3 2 1 我想要这样的输出（没有任何重复项并保留顺序的唯一行）： 4 3 我尝试排序 file.txt | uniq -u 它可以工作，但输出是如此......

linux bash awk uniq

回答 1 投票 0

如何查找文件中的重复行？

我有一个包含以下数据的输入文件： 1号线第2行 3号线开始 5号线 6号线 7号线结尾 9号线 1号线 3号线我试图找到所有重复的行，我尝试过排序文件名 |优衣库-c 但是...

sorting uniq

回答 4 投票 0

正确使用awk、sort和uniq

我正在处理一个大（500MB+）.csv 文件。我想一次一页打印给定列的唯一值，以便于查看。 awk F, '{print $}' 排序 |独特的这会产生快速滚动...

awk uniq

回答 2 投票 0

awk 以及 sort 和 uniq 组合无法正确计数

这是我的文件.log： {“log”：“2023-08-20 10:06:59 [DNSHandler:ProxyResolver]请求：[86.104.44.22:63761]（udp）/'a1834.dscg2.akamai.NET。' （A） ","stream":"stdou...

bash awk uniq

回答 1 投票 0

在shell中以不同顺序调用uniq和排序。

当在shell脚本中调用uniq和sort时，它们的顺序有区别吗？我这里说的是时间和空间上的问题。 grep 'somePattern' 。

optimization shell performance sorting uniq

回答 3 投票 3

在Laravel6+中只生成Uniq的交易ID号。

我把这个问题贴在这里，因为我找不到正确的解决方案。我必须做一个uniq的交易ID，我用time()+rand()生成这个函数，但仍然会发生碰撞... ...

php laravel random uniq laravel-6.2

回答 1 投票 0

BASH中的<uniq>和R中的<unique>有什么区别？

我在BASH中使用uniq和在R中使用unique得到的结果是不同的。我的样子（超过9千行）： samples read_seq ccd_x29 GCATTGGT ccd_x29 GCATTGGT ccd_x29 GCATTGGT ccd_x20 GCCCGGCTAG ....

r bash count unique uniq

回答 1 投票 0

在Linux中使用带sort或不带uniq的命令之间的区别

[当我使用uniq -u data.txt时，列出整个文件，而当我使用sort data.txt时| uniq -u省略重复的行。为什么会这样？优衣库人说，-u，--unique只打印唯一行。我不...

linux sorting command uniq

回答 1 投票 0

基于Bash中文件名分组文件名的最佳方法？

我有一个包含以下文件的文件夹：DA-001-car.jpg DA-001-dog.jpg DA-001-coffee.jpg DA-002-house.jpg DA-003-coffee.jpg DA-003- cat.jpg ...我想生成以下（CSV）输出：SKU，IMAGE DA -...

bash csv for-loop awk uniq

回答 4 投票 0

“-”在使用uniq时覆盖文件而不是代表stdin，为什么？

我正在尝试查找两个文件之间的唯一条目。我们称它们为file1和file2。 file1未排序，而file2已预先排序。我尝试了以下操作：排序file1 | uniq -u-file2 ...

linux bash shell command-line uniq

回答 1 投票 0

如何在Linux上使用awk或grep删除所有不匹配的数据

我的数据文件是网络信息，现在我打印所有ID。我们需要一个生成ID和一个已接收ID，因此，如果有ID：4253，则应该有另一个ID4253。如何使用...

linux uniq

回答 1 投票 -1

在while循环中无法获得uniq -c

我正在尝试对日志文件进行排序，以获取唯一IP地址的总数，并对出现的地址进行大于n的操作。这是我的第一个命令：$ grep -B 1“ foobar” ip.log | grep“ IP ...

linux bash count uniq

回答 1 投票 0

Linux读取日志文件并进行过滤以仅获取一次相同类型的日志消息

在我的日志文件中，我有三种类型的日志消息：信息，警告和错误。我只想获取错误消息，但是由于错误消息的类型不同，并且同一条错误消息可能...

linux shell ubuntu grep uniq

回答 2 投票 1

Apache access.log排序ip点击并自定义输出结果

我一直在尝试对apache.log文件中的结果进行排序和自定义打印。情况是，我希望将结果视为：输出应表示每月总点击数，排序方式为...

apache sorting awk uniq

回答 2 投票 0

过滤熊猫数据框中具有唯一值的列的列

我有一个非常大的数据框，包含2000多个列。我正在尝试计算每列的唯一值的数量，并过滤出具有特定值以下的唯一值的列。这是一个...

python pandas dataframe uniq

回答 2 投票 -1

最新问题

© www.soinside.com 2019 - 2024. All rights reserved.