[linux-leman] enlever des doublons

[hatim]

maintenant , j ai un fichier texte avec plein de lignes et des fois la meme 
ligne est repeté 2 fois de suite l'une apres l autre 

y a til un moyen avec un script de supprimer le doublon ?

Ex 

cat fichier .txt

Allow/DenyFilter are now extended to the directory and ftpaccess contexts.New
Allow/DenyFilter are now extended to the directory and ftpaccess contexts.New
directive SQLLogFileFixes for TRU64 and OS/XNumerous bugfixesLinuxprivs are
renamed to mod_cap and built-in
New contrib modules: mod_auth_file, mod_tls, mod_rewriteNew directives:
New contrib modules: mod_auth_file, mod_tls, mod_rewriteNew directives:
AuthOrder, ListOptions, TransferRateNew display variables: %i, %o, %tNew log
variables: %d, %D, %URFC2389 support


les deux lignes 1 et 5 sont doubles , comment faire pour supprimer la 2 et 6
plus generalement , le but du jeux est de pouvoir faire ca sur un gros 
fichier 


Merci encore