Скрипт оффлайн, который удаляет дубли строк в файле.

Нужно написать небольшой скрипт, который бы работал offline на компьютере с Win-10 (без установки дополнительных программ)

ТехЗадание

1. Исходные данные

- есть файл "content.csv" в котором находятся строки контента

2. Нужно сделать скрипт, запускаемый offline на компьютере, который может выполнять с контентом следующие функции:

A  - удалять все полные дубликаты строк (100% совпадения), оставляя только одну самую верхнюю из всех дубликатов

Б - удалять строки по совпадению одного фрагмента (список фрагментов в fragment.txt), если в строках есть одинаковый фрагмент, то нужно удалить все эти строки, оставляя только одну самую верхнюю из всех. 

Условия для определения фрагментов: 

*Б1 фрагменты разграничены знаком точкой с запятой ; 

*Б2 фрагмент содержит наборы букв и знаков, которые указаны в файле fragment.txt , если 

 файл fragment.txt пустой - то выполняется только пункт "А"

-----------------------------

Скрипт должен работать с большими объемами строк в файле "content" - до 400тыс