如果使用uniq命令(在shell中)如何保留文件的格式？
在使用uniq命令时，如果需要保留文件的格式，可以使用awk命令进行处理。具体操作如下：
- 使用awk命令将文件中的每一行转换为一个字段，并将该字段作为输出的第一个字段。
awk '{print $0, $0}' input.txt > output.txt其中，input.txt是输入文件，output.txt是输出文件。
- 使用uniq命令对输出文件进行处理。
uniq -c output.txt这样就可以保留文件的格式，并且在每行前面添加出现次数。
需要注意的是，uniq命令只能对相邻的重复行进行处理，因此需要先将文件中的所有行转换为一个字段，才能保留文件的格式。
相关·内容
为了使用uniq命令，您必须首先对文件进行排序。
但是在我拥有的文件中，信息的顺序很重要，那么我如何才能保持文件的原始格式，同时仍然去掉重复的内容呢？
浏览 0提问于2009-03-13得票数 6
回答已采纳
2回答
这个过程相当慢，因为从磁盘读取文件到内存的时间很长，所以我想知道是否可以通过用某种“快速”语言重写我的程序来加快从文件读取文件的过程。目前我使用的是python，这对于这类工作可能是低效的。(如果我知道python和javascript之外的其他语言，我可以自己实现测试……)
将所有数据放入数据库也会有帮助吗？文件无论如何都放不下RAM，因此它将再次从磁盘读取，只
浏览 0提问于2012-08-04得票数 4
回答已采纳
1回答
我有这段代码，它在普通CLI中是可执行的，但是如何将它应用到文件中呢？sort | uniq | cut -f 1 -d "," | uniq -c |sed -e "s/^[ \t]*//"
它总是告诉我命令找不到之类的东西。编辑:我的命令在CLI中工作，但我想在bash脚本中</e
浏览 0提问于2020-06-16得票数 0
2回答
删除重复的shell命令
、、、
我想删除所有重复从一个文件有2列。标准只在我的第一列上，但是我需要在输出上保留第二列。例子：
可能是另一个命令会更合适？
谢谢你的帮忙
浏览 3提问于2015-08-25得票数 0
Ubuntu 16.04
当我在shell中使用sdiff命令时，格式是完美的。sdiff -w 185 fileone filetwo 当我使用sdiff命令并将结果发送到文件时，格式会消失。sdiff -w 185 fileone filetwo > filethree当我将sdiff输出发送到文件时，如何保留<
浏览 0提问于2021-04-11得票数 0
回答已采纳
1回答
在SED命令中，我希望删除2000_SOMENAME之后的所有内容，如果可能的话，如果没有找到该格式，也希望给出一个错误。例如，如果文件名为ITALY_2022_BEST1FRIENDS2_ROME.txt。如果找不到这种模式，我只想要2022_BEST1FRIENDS2，我想在shell脚本中给出一个错误。-iname '*.txt' | sed -e &#x
浏览 0提问于2022-06-07得票数 1
回答已采纳
我有使用type -t的shell脚本，但显然它最初是为bash编写的，在zsh上的这台机器上，它不起作用。我看到了type -t所做的bash文档：
如果使用-t选项，则键入一个单词，即“别名”、“函数”、“内置”、“文件”或“关键字”，如果名称是别名、shell函数、shell内置文件、磁盘文件或shell
浏览 0提问于2017-10-19得票数 2
回答已采纳
我有以下格式的文件1-demfile.txt 2-demfile.txt 3-demfile.txt#!/bin/bash-F '#_‘{打印FILENAMEME，NF}？20
10 2-d
浏览 0提问于2018-01-21得票数 0
在包含多个文件的目录中，如果在文件中找到了特定的regexp (或格式)，则获取该文件名。例子：
如果在名为ramayana的文件中找到单词"rama“，则打印文件名”ramayana“，如果文件中包含类似于名为”(文本-数字)“的”(文本-数字)“格式的<
浏览 1提问于2012-02-24得票数 0
回答已采纳
1回答
我正在努力计算克里夫兰骑士上玩家的频率，现在我的命令看起来有点像cut -d "," -f 2 nba2017-roster.csv | grep "CLE" | uniq -c。我要的是15，不是"CLE"。我该怎么做？谢谢!
浏览 0提问于2018-03-19得票数 3
回答已采纳
2回答
最初，我运行了shell脚本，并将输出定向到一个文件中，然后使用Perl读取并解析该文件。我想把这两个步骤放在一个Perl脚本中。我试着写这样的东西：my $read = qx(samtools view -S $in |cut -f 3|sort|uniq -c|awk '{OFS=";
我得到了不能打开$in的错误消息，并在屏幕上打印了qx()<e
浏览 4提问于2014-03-29得票数 0
回答已采纳
我目前正在centos 7 VM上编写一个python脚本，该脚本必须执行几个shell命令。我找到了一个做这项工作的图书馆，但我发现其中一个错误了。我是从文本文件中得到这些命令的，所以我不知道它们是做什么的。我理解简单的，但这些都超出了我的水平。因为只有2行会出现错误，所以我知道这不是脚本本身，而是我如何使用它。.*images: //' | sor
浏览 0提问于2021-06-21得票数 0
我有两个文件，我想把它们组合起来。合并的内容不需要重复内容，内容顺序是默认顺序。
当我使用uniq时，我将使用sort，sort命令使命令变得疯狂！那么，如何使用shell来组合文件，并让内容具有默认顺序，并且没有重复行？
浏览 2提问于2016-12-23得票数 0
回答已采纳
我在Shell和Python中运行以下两个脚本来计算文本文件中唯一的单词数。但是，结果非常不同( Python中的123,832个，Shell中的185,948个)。您能帮我解释一下是什么原因造成了差异，以及如何使Shell命令返回与Python相同的结果吗？Python中的代码如下：
def
浏览 0提问于2019-08-05得票数 2
回答已采纳
我在我的.bash_profile底部添加了这一行：
source .bash_profilesource
浏览 0提问于2018-04-20得票数 0
3回答
我有上千个像这样的文件。08wrfout_d03_2010-06-12_00:00:35我只需要保留第一个时间戳在这种情况下，wrfout_d03_2010-06-12_00:00:20
我可以知道如何做到这一点而不逐个删除吗？谢谢!
浏览 0提问于2022-08-20得票数 0
我正在使用shell脚本对URL进行多次迭代的nslookup。我需要检查每个URL返回了多少次IP。在输出文件中，输出存储为IP addressCommand is
cat在这种情况下，uniq-c命令</em
浏览 2提问于2013-04-12得票数 0
回答已采纳
13回答
我有一个文本文件，其中包含一个长的条目列表(每行一个)。其中有些是重复的，我想知道是否有可能(如果是，如何)删除任何重复的。如果可能的话，我有兴趣在vi/vim内部做这件事。
浏览 9提问于2008-12-08得票数 147
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
