腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
10
回答
在
Linux
上块级的
去
重复
linux
、
netapp
、
deduplication
NetApp提供块级
去
重复
(ASIS).您知道在
Linux
(或OpenSolaris,*BSD)上提供相同功能的
文件
系统(甚至是基于FUSE的)吗? (我不感兴趣的是像硬链接那样的虚假
重复
)。
浏览 0
提问于2009-06-10
得票数 11
回答已采纳
1
回答
通过xargs显式
排序
并行化- xargs的不完全结果
bash
、
sorting
、
parallel-processing
、
xargs
、
deduplication
上下文 我需要使用‘
排序
-u’优化
去
重复
,我的
linux
机器有一个旧的‘
排序
’命令实现(即5.97),没有‘-并行’选项。虽然“
排序
”实现了可并行的算法(例如合并
排序
),但我需要使这种并行化显式化。生成的部分被传递给'xargs‘命令,以便通过sortu.sh脚本执行并行
去
重复
(后面是详细信息)。sortu.sh封装对'sort -u‘的调用并输出结果
文件
名(例如,"sortu.sh f
浏览 6
提问于2015-08-10
得票数 1
3
回答
重复
文件
查找器,重点放在
文件
夹上
gratis
、
file-management
、
duplicate-files
我已经尝试过许多
重复
的查找程序,但是他们倾向于将所有的
文件
放在一个不同的位置上。我只想把注意力集中在
文件
夹上。 在使用
重复
的
文件
程序搜索我的计算机后,我想要选项从选定的
文件
夹中删除所有
文件
。
浏览 0
提问于2017-02-13
得票数 3
回答已采纳
1
回答
如何删除python中大型
文件
的
重复
行
python
、
file
、
duplicates
、
line
我有一个大约32 or的txt
文件
,需要检查是否有一些
重复
的行。在不逐行读取的情况下,删除大型文本
文件
的
重复
行的最佳方法是什么?
浏览 3
提问于2021-04-07
得票数 1
回答已采纳
2
回答
ZFS离线冗余软件
zfs
、
truenas
、
deduplication
我有一个300 to的Freenas服务器来备份几个
linux
节点。备份适用于每日快照和rsync任务。我的意思是,这些
文件
确实有相同的名字和相同的访问时间-- fdupes只需很小的努力就能认出它们是相同的.
浏览 0
提问于2019-08-20
得票数 5
1
回答
对运行合计进行
排序
crystal-reports
我想按ticketCost对我的报告进行
排序
,但常规的sum汇总是所有记录的总和,包括
重复
记录。 左边的字段是摘要,右边的字段是运行汇总。当我
去
配置组时,只显示摘要,它只允许我选择摘要。 如何对运行合计进行
排序
?或者,是否有其他方法可以使用摘要来避免
重复
的记录?
浏览 1
提问于2017-08-17
得票数 0
1
回答
itertools.combinations提供的担保是什么?
python
用于状态的docs: 元素根据它们的位置而不是它们的值被视为唯一的。因此,如果输入元素是唯一的,那么在每个组合中都不会有
重复
的值。 这里的确切保证是什么?
浏览 0
提问于2018-11-02
得票数 11
回答已采纳
1
回答
删除跨多个txt
文件
的
重复
行
awk
、
sort
、
duplicate
我有12个文本
文件
都在一个
文件
夹中,每个
文件
都有大约500万行,每个
文件
本身没有
重复
行,但是在多个
文件
中
重复
,我想删除每个
文件
中的
重复
行,但仍然单独保存它们,我尝试了许多
Linux
排序
命令,它不断地将
文件
合并在一起
浏览 0
提问于2022-01-14
得票数 -1
回答已采纳
1
回答
CentOS cifs客户端将Windows2012Depliced
文件
视为符号链接
windows-server-2012-r2
、
centos7
、
cifs
、
samba4
大约一周前,这个网站变得“崩溃”了,我发现在
Linux
中,这些
文件
如下所示:
Linux
上的readlink工具显示了与屏幕截图中相同的中文字母。在Windows下,相同的
文件
如下所示:我和Windows服务器的sysadmin谈过了,他告诉我大约一周前他们在Windows服务器上打开了
文件
去
复制。查看其中一个
文件
上的属性可以发现,“磁盘上的大小”非常小,此外,“问题”
文件
还具有“L”属性,这似乎支持
去
重复
浏览 0
提问于2015-06-08
得票数 6
回答已采纳
1
回答
backuppc类似软件?
backup
、
raid
、
network-attached-storage
它只能在
linux
下运行,不能与某些
文件
系统、NAS或RAID技术(如FlexRaid或任何Windows )一起工作。此外,它还支持数据
去
复制甚至
文件
压缩,以节省备份服务器上的空间.外面有类似的东西吗?
浏览 0
提问于2011-05-23
得票数 0
2
回答
如何在当前
文件
夹中找到可能
重复
的
文件
?
file
、
comparison
、
duplicates
、
sysadmin
、
duplicate-removal
如何在给定目录中找到可能
重复
的
文件
?对于这类事情,有什么现有的工具吗?一些我能想到的启发式方法: 它应该是递归的。它只应该比较
文件
名和大小,而不应该比较其他的。当
文件
名稍有不同时,应该能够找到
重复
的
文件
,比如"foobar.txt“和"foobar.txt (2)”--I有一个驱动器上的
文件
,可以按照所需的安装到
Linux
、Mac或。
浏览 5
提问于2012-01-25
得票数 2
回答已采纳
6
回答
是否有开源的
去
复制备份解决方案?
backup
、
bacula
我也希望去复制,所以如果在第一次备份时保存了一个
文件
,软件就会创建一个到它的符号链接,而不是在所有的备份过程中再次保存数据。它还必须足够聪明地知道什么时候
文件
被删除,
文件
被移动到它存在的最新备份中,并且更新到它的所有符号链接。 我在看巴库拉,但我不确定它是否能做
去
重复
或类似的事情。
浏览 0
提问于2011-02-17
得票数 9
4
回答
删除日志
文件
中的
重复
行
linux
、
bash
、
awk
、
sed
我正试图从
重复
行中清理日志
文件
。首先,我使用带有uniq -d标志的
排序
命令,它帮助我删除
重复
项,但没有解决我的问题。
排序
命令的输出。Tracker] Tex 123 ssdPNUM-1234: [App] [Tracker] Text 123 ssd vp
排序
命令删除
重复
项,但不幸的是,我还需要删除
重复
PNUM的行,并
浏览 0
提问于2020-07-10
得票数 2
回答已采纳
1
回答
从包含没有特定删除器的地址的
文件
中查找
重复
地址
text-processing
、
sed
、
grep
使用
Linux
,我尝试了所有使用grep -i "AX.*BY.*CZ"的地址criteria, sed, awk, agrep 但问题是,每次它只在
文件
中搜索字符串,而不是像AX and then BY and then
浏览 0
提问于2017-12-23
得票数 -1
2
回答
有块级的存储
文件
系统吗?
linux
、
filesystems
、
backup
、
deduplication
我正在寻找一个按块内容存储
文件
的
文件
系统,因此类似的
文件
只需要一个块。这是备份用的。这类似于块级备份存储所提议的,如zbackup,但我希望
Linux
文件
系统允许透明地这样做。
浏览 0
提问于2019-10-01
得票数 7
回答已采纳
1
回答
在Windows中,对应的
linux
命令是什么?
linux
、
windows
、
bash
我正在尝试合并Windows批处理中的所有
文件
,然后对所有行进行
排序
,并仅根据唯一行进行过滤,因为标题可以
重复
多次。我曾经使用过
linux
,在
linux
中这个命令就是这样,但是我不确定在windows bash中如何做同样的事情。
浏览 1
提问于2017-11-07
得票数 0
3
回答
文件
创建/创建时间?
files
、
timestamps
可能
重复
: 如何做ls,然后按创建的日期对结果进行
排序
?
Linux
中是否有在创建
文件
时显示的命令?我看到ls -l给出了最后修改的时间,但是我能得到创建的时间/日期吗?
浏览 0
提问于2011-11-11
得票数 265
4
回答
如何使用
Linux
shell脚本在文本
文件
中生成唯一行列表?
linux
、
unique
、
lines
假设我有一个
文件
,其中包含一堆行,其中一些
重复
:line1line2line3我应该使用什么
linux
命令来生成唯一行的列表:line2line3 如果
文件
未
排序
,即
重复
行可能不在块中,这种情况会发生变化吗?
浏览 2
提问于2013-05-31
得票数 14
回答已采纳
1
回答
从单个或多个大型
文件
中
排序
和删除
重复
项
merge
、
mergesort
我有一个70 400的
文件
,包含400行million+ (JSON)。我的最终目标是删除
重复
的行,以便我有一个完全“
去
欺骗”版本的
文件
。我是在一台有8核和64 am内存的机器上这样做的。我觉得
文件
太大了。 当前方法: 现在我有8
浏览 0
提问于2018-12-26
得票数 0
1
回答
如何在物理内存中避免共享库文本部分的多个副本?
linux
、
memory-management
、
process
、
shared-libraries
、
loader
当
Linux
加载共享库时,我的理解是,文本部分只加载一次到物理内存,然后被映射到引用它的不同进程的页表中。$ cat /proc/22824/maps 00441000-0045c000 r-xp 00000000 fd:00 2622360 /lib
浏览 2
提问于2017-07-19
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
把 Linux 上的文件列表和排序玩出花来
测试效率加倍提升!shell高阶命令快来get下
生信入门系列之Linux入门(二):基础命令(下)
搞定Linux Shell文本处理工具,看完这篇集锦就够了
为初学者提供的 uniq 命令教程及示例
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券