关于c#winform无数据库处理6万数据量的困惑

有一个需求，6万条的txt文本中有八列，第一列为id其余为介绍列，id列需要检测是否重复，系统提供用户导出重复内容，提供删除重复项功能。要求减少其他第三方软件的安装，包括数据库。经过几次尝试，数据操作时间很长经常卡死。增加access数据库依然如此。请高手指点。