Supprimer les mots identiques et ne garder qu’une occurrence

Bonjour 

je travaille sur un document de plus de 1000 pages(un dictionnaire) et je suis buté par les soucis qui suivent :

1) supprimer les mots qui se répètent et ne garder que le premier mot 

2) copier cet ensemble de mots dans un autre document qui lui déjà contient d'autre mots avec leur définition tout en gardant l'ordre alphabétique ainsi qu'une quelle occurrence de chaque mot