Два файла с четырьмя общими последовательностями сведены в одну FASTA: повторы схлопнуты — со счётчиком, сколько именно, — а записи выходят отсортированными по длине. Дубликаты считаются по итоговой последовательности, уже после преобразований.