linux求两个列的交集并集差集

最新推荐文章于 2024-11-07 00:00:49 发布
最新推荐文章于 2024-11-07 00:00:49 发布
阅读量881 收藏
点赞数 1
CC 4.0 BY-SA版权
分类专栏： 运维 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_34786604/article/details/127682854

目标

我们经常需要快速的知道两个列。一般这两个列是样品或者id。我们想看看他们的逻辑情况（交集并集差集）

方案

我们可以使用pandas去处理。
但是linux命令行明显要好得多。

先模拟两个数据组。

for i in {
   
   a..g};do echo $i >> 1.txt;done
for i in {
最低0.47元/天 解锁文章

200万优质内容无限畅学
linux两个文件取交集、并集、差集
Kenina_Xie的博客
10-29 2533
如何得到两个文件的交集、并集和差集？ 交集：两个文件中都出现的行 并集：两个文件中的所有行加起来，去掉重复 差集：在一个文件中存在，而在另一个文件中不存在。 比如以下两个文件： a.txt aaa bbb ccc 111 222 b.txt ccc ddd eee 111 333 结果： a.txt和b.txt的交集： ccc 111 a.txt和b.txt的并集： 111 222 333 aaa bbb ccc ddd eee a.txt中存在b.txt中不存在： 222 aaa bbb b.txt中存在
java8获取两个list的交集和差集_java8 stream两个集体交集、差集、并集操作
weixin_39528525的博客
12-18 2855
业务场景：页面左右两个datagrid，双击左边datagrid行，移动到右边datagrid，右边datagrid行双击，移动到左边datagrid点击保存，提交修改的数据到后台后台要把查询到的数据，和这次提交的数据对比，不变的不动，有新添加的，要增加，有去掉的要执行删除操作注：不能统一删除，再全新增，原来已经存在的信息可以做了一些配置，全删除，再全插入，原来的配置会丢了。那就要后台对两个集合进...
linux命令对两个文件求差集、交集、并集
dkgee
12-25 7064
一、差集 有两个文件user_2020.txt、user_2019.txt 其中user_2020.txt中内容如下： uuu aaa bbb 111 user_2019.txt中内容如下： eeeee aaa bbb ccc aaa 示例一：求user_2020.txt - user_2019.txt的差集命令 sort user_2020.txt user_2019.txt user_2019.txt| uniq -u 结果如下： 111 uuu 示例二：求user_201.
Linux 两个文件求交集、并集、差集
yuanyuan95的专栏
03-08 2113
这里写自定义目录标题Linux 两个文件求交集、并集、差集一、交集二、并集三、差集四、相关的解释 Linux 两个文件求交集、并集、差集 原文地址： Linux 两个文件求交集、并集、差集 (https://www.cnblogs.com/molong1208/p/5358509.html) 一、交集 sort a.txt b.txt | uniq -d 二、并集 sort a.txt b.tx...
高级shell扩展---uniq命令
panbuhei
11-06 384
uniq uniq 命令用于检查及删除文本文件中重复出现的行列，一般与 sort 命令结合使用。 语法 uniq [-cdu][-f<栏位>][-s<字符位置>][-w<字符位置>][--help][--version][输入文件][输出文件] 参数： -c或--count 在每列旁边显示该行重复出现的次数。 -d或--repeated 仅显示重复出现的行列。 -f<栏位>或--skip-fields=<栏位> 忽略比较指定的栏位。 -s<
linux文件交集差集
夜宿荒寺
08-19 1013
文件的交集，差集
linux求两个文件的差集,Linux 求文件交集 差集等
weixin_39821874的博客
04-28 391
使用comm命令假设两个文件FILE1和FILE2用集合A和B表示，FILE1内容如下：abcedaFILE2内容如下：cdac基本上有两个方法，一个是comm命令，一个是grep命令。分别介绍如下：comm命令， Compare sorted files FILE1 and FILE2 line by line. With no options, produce three-column o...
python全栈开发《60.获取两个集合的差集》
最新发布
清菡的博客
11-07 383
目录1.什么是差集2.difference的功能3.difference的用法4.代码1.什么是差集a，b两个集合，由所有属于a且不属于b的元素组成的集合叫做a与b的差集。集合a：1，2，3，4集合b：3，4，5，6以a为焦点来看。1、2就是a与b的差集。2.difference的功能返回集合的差集，即返回的集合元素包含在第一个集合中，但不包含在第二个集合中。3.difference的用法a_se...
数据合集、并集和差集的产生（seq、cat、sort和uniq的综合使用）
weixin_43960055的博客
11-03 1522
合集、并集和差集（seq、cat和uniq的综合使用） 不多废话，直接就上代码。 seq 1 10 产生1，2，… ，10 十个数据（默认步长为1），各个数据换行显示。 seq ‘ ’ 1 10 产生1，2，…，10 十个数据（默认步长为1），数据之间空一格显示。 (seq 0 3 17) >test1 从0到17之间，按照步长3选取数据。 cat test1 浏览test1文件内容。 (seq 3 6 18) >test2 从3到18之间，按照步长6选取数据，并命名为test2。 cat
Linux实现文件内容去重及求交并差集
01-09
一、数据去重 日常工作中，使用Hive或者Impala查询导出来可能会存在数据重复的现象，但又不想重新执行一遍查询（查询时间稍长，导出文件内容多），因此想到了使用Linux命令将文件的内容重复数据进行去除。 案例如下： 可以看到aaa.txx有3条重复数据 想去掉多余的数据，只保留一条 sort aaa.txt | uniq > bbb.txt 将aaa.txt文件中重复数据去掉，输出到bbb.txt 可以看到bbb.txt文件中只保留了一条数据 二、数据交、并、差 1)、交集(相当于user_2019 inner join user_2020 on user_2019.user_no=u
linux下 取文件的交集 并集 差集
onlymayao的博客
06-10 397
交集 sort a.txt b.txt | uniq -d 并集 sort a.txt b.txt | uniq 差集 sort a.txt b.txt b.txt | uniq -u sort b.txt a.txt a.txt | uniq -u
Linux中uniq去重以及对两个文件取交集，并集，差集
Lian_Ge_Blog的博客
04-02 3064
Linux中uniq去重以及对两个文件取交集，并集，差集
linux取差集
qq_39460085的博客
10-24 591
A,B两个文件，取 A-B cat A B B|sort|uniq -u 取A交B sort A B | uniq -d
[Linux] 取两个文件的并集/交集/差集
weixin_34187862的博客
03-07 2064
uniq -d是只打印重复行 -u是只打印独一无二的行文件A : abcd文件B: cdef取并集:A + B sort A B|uniq 取交集: sort A B|uniq -d 取差集:A - B sort A B B|uniq -u 取差集:B - A sort A B A|uniq -u 转载于:https://www....
linux得到两个文件的交集、并集
weixin_49621901的博客
04-21 797
1、 两个文件的交集、并集（每个文件中不得有重复 也可以是多个文件）(2)、取出两个文件的交集（只留下同时存在于两个文件中的文件）(1)、取出两个文件的并集（重复的行只保留一份）(1)、 一个文件在上，一个文件在下。(2)、 一个文件在左，一个文件在右。(3)、 删除交集，留下其他的行。(1)、 重复的多行记为一行。(2)、 重复的行全部去掉。3、一个文件去掉重复的行。
Linux Shell文件差集
weixin_33932129的博客
09-28 166
file1-file2 =&gt; file3file1=/data/aaafile2=/data/bbbfile3=/data/cccsort -m &lt;(sort $file1 | uniq) &lt;(sort $file2 | uniq) &lt;(sort $file2 | uniq) | uniq -u  &gt; $file3
linux文件取交集、差集、并集
代元培
08-06 1673
# 交集 sort a.txt | uniq > aa.txt sort b.txt | uniq > bb.txt cat aa.txt bb.txt | sort | uniq -d # 并集 cat a.txt b.txt | sort | uniq # 差集 cat aa.txt bb.txt bb.txt | sort | uniq -u # 取差集 sort a.txt b.txt b.txt|uniq -u > diff.txt
linux 文件 内容 并集,Linux 两个文件求交集、并集、差集
weixin_32536777的博客
05-12 367
一、交集 sort a.txt b.txt | uniq -d二、并集 sort a.txt b.txt | uniq三、差集 a.txt-b.txt: sort a.txt b.txt b.txt | uniq -ub.txt - a.txt: sort b.txt a.txt a.txt | uniq -u四、相关的解释 使用sort可以将文件进行排序，可以使用sort后面的玲玲，例如 -n ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

演技拉满的白马

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值