每行在promotion后面包含一些数字，如果这些数字是相同的，则认为是相同的行，对于相同的行，只保留一行。接下来通过本文给大家介绍Python做文本按行去重的实现方法，感兴趣的朋友一起看看吧

文本： 每行在promotion后面包含一些数字，如果这些数字是相同的，则认为是相同的行，对于相同的行，只保留一行。 思路： 根据字典和字符串切割。 建立一个空字典。 读入文本，并对每行切割前半部分，在读入文本的过程中循环在这个字典中查找，如果没找到，则写入该行到字典。否则，则表示该行已经被写入过字典了（即出现重复的行了），不再写入字典，这就实现了对于重复的行只保留一行的目的。 文本如下: /promotion/232 utm_source /promotion/237 LandingPage