Trucs:Supprimer les ^M dans les fichiers ASCII - Historique des versions

Jiel le 24 mars 2016 à 15:18

2016-03-24T15:18:37Z

← Version précédente		Version du 24 mars 2016 à 15:18
Ligne 1 :		Ligne 1 :
			= Supprimer les ^M dans les fichiers ASCII =
	<div class="leapar">contributeurs léa<></div>		<div class="leapar">contributeurs léa<></div>

Ligne 108 :		Ligne 109 :
	Il trouve tout seul l’encodage en entrée.		Il trouve tout seul l’encodage en entrée.

	[[Catégorie:~~Trucs_Administration~~]]		[[Catégorie:Trucs Administration systeme]]

Nicola : /* Méthode avec des encodeurs de formats de fichiers texte */

2006-01-22T11:03:39Z

Méthode avec des encodeurs de formats de fichiers texte

← Version précédente		Version du 22 janvier 2006 à 11:03
Ligne 102 :		Ligne 102 :
	On peut utiliser ''recode'' ou ''konwert'', le deuxième s’utilise ainsi :		On peut utiliser ''recode'' ou ''konwert'', le deuxième s’utilise ainsi :

	Vers Unix et Amiga : <code>konwert lf lefichier</code>		* Vers Unix et Amiga : <code>konwert lf lefichier</code>
	Vers Mac : <code>konwert cr lefichier</code>		* Vers Mac : <code>konwert cr lefichier</code>
	Vers Windows et DOS : <code>konwert crlf lefichier</code>		* Vers Windows et DOS : <code>konwert crlf lefichier</code>

	Il trouve tout seul l’encodage en entrée.		Il trouve tout seul l’encodage en entrée.

	[[Catégorie:Trucs_Administration]]		[[Catégorie:Trucs_Administration]]

Nicola : + konwert

2006-01-22T11:03:05Z

+ konwert

← Version précédente		Version du 22 janvier 2006 à 11:03
Ligne 95 :		Ligne 95 :

	Cette solution est une des plus simples, et moins lourde que d'utiliser perl, awk ou d'écrire un script.		Cette solution est une des plus simples, et moins lourde que d'utiliser perl, awk ou d'écrire un script.

			====Méthode avec des encodeurs de formats de fichiers texte====

			Par nicola

			On peut utiliser ''recode'' ou ''konwert'', le deuxième s’utilise ainsi :

			Vers Unix et Amiga : <code>konwert lf lefichier</code>
			Vers Mac : <code>konwert cr lefichier</code>
			Vers Windows et DOS : <code>konwert crlf lefichier</code>

			Il trouve tout seul l’encodage en entrée.

	[[Catégorie:Trucs_Administration]]		[[Catégorie:Trucs_Administration]]

Nicola : /* Autre méthode avec ''vim'' */

2006-01-22T10:59:51Z

Autre méthode avec ''vim''

← Version précédente		Version du 22 janvier 2006 à 10:59
Ligne 38 :		Ligne 38 :
	Par Rémi Collet		Par Rémi Collet

	~~C'est~~ prévu dans vim, en utilisant set fileformat.		C’est prévu dans vim, en utilisant <code>set fileformat</code>.

	~~Ex : Supression~~ des ^M		Suppression des ^M

	<div class="code"><nowiki>:set fileformat=unix</nowiki></div>		<div class="code"><nowiki>:set fileformat=unix</nowiki></div>

	~~Ex :~~ Ajout des ^M		Ajout des ^M

	<div class="code"><nowiki>:set fileformat=dos</nowiki></div>		<div class="code"><nowiki>:set fileformat=dos</nowiki></div>

Nicola : réorganisation + titraille

2006-01-22T10:57:39Z

réorganisation + titraille

@@ Ligne 3 : / Ligne 3 : @@
 Les caractères ^M que l'on peut rencontrer parfois dans les fichiers texte sous Unix proviennent du codage de la fin de ligne, qui diffère selon que le fichier a été édité sur un système Microsoft (CR LF, ou ^M et ^L) ou sur un Unix (LF seul). Les éditeurs de texte qui ne supportent pas le codage à la Microsoft affichent donc ce ^M superflu... Voyons ci-dessous des méthodes pour s'en débarrasser.
-==== Méthode 1 ====
+==== Méthode shell ====
 Par fp (crontab_at_caramail_point_com)
@@ Ligne 13 : / Ligne 13 : @@
 '''Remarque''' (R. LEROY): Pour Debian si vous voulez faire encore plus rapide :<br /><code>apt-get install sysutils</code><br /> puis <code>dos2unix fichier.txt</code>
-==== Méthode 2 ====
+==== Méthode avec ''vi'' ====
 Par Jonesy(jonesy_at_wanadoo_point_fr)
@@ Ligne 34 : / Ligne 34 : @@
 <div class="note">NDM: voir aussi la fin de l'[../software/vi.php3 article sur vi].</div>
-==== Méthode 3 ====
+==== Autre méthode avec ''vim'' ====
 Par Zeck (zeck_at_netliberte_point_org)
@@ Ligne 48 : / Ligne 76 : @@
 <div class="code"><nowiki>#!/bin/bash</nowiki><br /> cat $1 | tr -d '\r' >$2</div>
-==== Méthode 4 ====
+==== Méthode avec Perl ====
 Par Arnaud ASSAD (arhuman_at_hotmail_point_com
@@ Ligne 58 : / Ligne 86 : @@
 <code>perl -pi -e 's/\r//g' *.c</code>
-==== Méthode 5 ====
+==== Méthode avec ''tr'' ====
 Par Marcopol (mlebas_at_labeille_point_net)
@@ Ligne 68 : / Ligne 96 : @@
 Cette solution est une des plus simples, et moins lourde que d'utiliser perl, awk ou d'écrire un script.
 [[Catégorie:Trucs_Administration]]

Legranblon : /* Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;) */

2006-01-21T11:12:05Z

Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;)

← Version précédente		Version du 21 janvier 2006 à 11:12
Ligne 85 :		Ligne 85 :
	[[Catégorie:Trucs_Administration]]		[[Catégorie:Trucs_Administration]]

	== Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;) ==		==== Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;) ====

	Si d'aventure vous vous retrouvez avec un fichier sur une seule ligne, et qu'au vu des commentaire précédents vous obtenez un fichier vidé de ses <span style="color:#0000FF;">^M</span> mais toujours sur une ligne, reprenez le fichier brut (pas celui dans lequel on ne distingue plus les fins de lignes; autrement dit le fichier sur lequel vous n'avez appliqué aucune des précédentes méthodes) : <br>		Si d'aventure vous vous retrouvez avec un fichier sur une seule ligne, et qu'au vu des commentaire précédents vous obtenez un fichier vidé de ses <span style="color:#0000FF;">^M</span> mais toujours sur une ligne, reprenez le fichier brut (pas celui dans lequel on ne distingue plus les fins de lignes; autrement dit le fichier sur lequel vous n'avez appliqué aucune des précédentes méthodes) : <br>

Legranblon : Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;)

2006-01-21T11:03:35Z

Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;)

← Version précédente		Version du 21 janvier 2006 à 11:03
Ligne 84 :		Ligne 84 :
	Remarque : il y a même le format Mac.		Remarque : il y a même le format Mac.
	[[Catégorie:Trucs_Administration]]		[[Catégorie:Trucs_Administration]]

			== Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;) ==

			Si d'aventure vous vous retrouvez avec un fichier sur une seule ligne, et qu'au vu des commentaire précédents vous obtenez un fichier vidé de ses <span style="color:#0000FF;">^M</span> mais toujours sur une ligne, reprenez le fichier brut (pas celui dans lequel on ne distingue plus les fins de lignes; autrement dit le fichier sur lequel vous n'avez appliqué aucune des précédentes méthodes) : <br>
			<br>
			$ vim lefichierenquestion

			une fois sous vim :

			:%s/{ctrl-v}{ctrl-m}/{ctrl-v}{entrée}/g

			et voilà!

PingouinMigrateur : conversion de la documentation originale de Léa par HTML::WikiConverter

2005-10-05T15:50:08Z

conversion de la documentation originale de Léa par HTML::WikiConverter

Nouvelle page

<div class="leapar">contributeurs léa<></div>

Les caractères ^M que l'on peut rencontrer parfois dans les fichiers texte sous Unix proviennent du codage de la fin de ligne, qui diffère selon que le fichier a été édité sur un système Microsoft (CR LF, ou ^M et ^L) ou sur un Unix (LF seul). Les éditeurs de texte qui ne supportent pas le codage à la Microsoft affichent donc ce ^M superflu... Voyons ci-dessous des méthodes pour s'en débarrasser.

==== Méthode 1 ====

Par fp (crontab_at_caramail_point_com)

Voilà enfin un modèle de fichier dos2unix pour ceux qui en cherchaient, Celui - ci est en ksh mais il est sûrement assez simple à adapter au bash...

<div class="code"><nowiki>#!/bin/ksh </nowiki><br /> #********************************************************************* <br /><nowiki># fichier : dos2unix </nowiki><br /><nowiki># description : Conversion fichier DOS en fichier UNIX </nowiki><br /><nowiki># (suppression des ctrl M) </nowiki><br /><nowiki># parametres : </nowiki><br /> #********************************************************************* <br /><nowiki># saisie nom de fichier a convertir </nowiki><br />if [ $# -lt 1 ] <br />then <br /> read F?"Fichier(s) a convertir :" <br />else <br /> F=$* <br />fi <br /><br /><nowiki># traitement fichiers </nowiki><br />for fic in $F <br />do <br /> if [ ! -f $fic ] <br /> then <br /> echo $fic n\'est pas un fichier valide <br /> continue <br /> else <br /> typ=`file $fic|grep -i -E "text|shell"` <br /> if [ "${typ}a" = "a" ] <br /> then <br /> echo Fichier $fic Non ASCII <br /> else <br /> tr -d "\015\023" <$fic >${fic}.$$ <br /> # aclget $fic | aclput ${fic}.$$ <br /> mv ${fic}.$$ $fic <br /> echo $fic converti <br /> fi <br /> fi <br />done </div>

'''Remarque''' (R. LEROY): Pour Debian si vous voulez faire encore plus rapide :<br /><code>apt-get install sysutils</code><br /> puis <code>dos2unix fichier.txt</code>

==== Méthode 2 ====

Par Jonesy(jonesy_at_wanadoo_point_fr)

Suite au Trucs & Astuces de FP, que je vous invite à consulter, je vous propose une autre méthode afin de supprimer ces sales bêtes.

Avant tout, sachez que le <code>^M</code> que vous voyez dans votre fichier texte est la manifestation du retour à la ligne des fichiers sur un système Microsoft Windows. <br />Sur les Unix-like (Linux, *BSD, Mac OS X, ...) le retour à la ligne est le code ascii 10 (<code><Ctrl-Alt-10></code> ou <code>0A</code> en hexadécimal), alors que sous un système de Microsoft, le retour à la ligne est l'ensemble des deux codes ascii dans l'ordre : 13 et 10 (<code><Ctrl-Alt-13></code> et <code><Ctrl-Alt-10></code> ou <code>0D</code> et <code>0A</code> en hexadécimal).

Donc pour supprimer ces fameux <code>^M</code>, faites comme suit :

Ouvrez votre fichier avec <code>vi</code> (ou <code>vim</code>, <code>gvim</code>, ...). <br />Une fois le fichier ouvert, tapez : <br /><code><nowiki>:%s/<Ctrl-v><entrée>//g</nowiki></code><br /><br />Pour rendre cette manipulation plutot ingrate automatique, faites en une macro ! <br />Editer votre fichier <code>~/.vimrc</code> et ajoutez y la ligne suivante : <br /><code>map v :%s/<Ctrl-v><Ctrl-v><Ctrl-v><Ctrl-v><Ctrl-v><entrée>//g</code><br />Ensuite, lorsque vous ouvrirez un fichier avec des <code>^M</code>, il vous suffira de taper <code>v</code> et <code><entrée></code>.

Cette solution a l'avantage de marcher sur tous les systèmes Unix-like, car <code>vi</code> (ou un clone) est présent sur tous les systèmes Unix-like.

D'autres solutions possibles :

* Ouvrir le fichier avec un éditeur hexadécimal, comme <code>ghex</code>, et supprimer tous les <code>0D</code>.
* Lors du tranfert du fichier sur votre système Unix-like, préférez le protocole FTP en mode ascii, si possible.

<div class="note">NDM: voir aussi la fin de l'[../software/vi.php3 article sur vi].</div>

==== Méthode 3 ====

Par Zeck (zeck_at_netliberte_point_org)

Syntaxe : <span class="code">dos2unix srcfile destfile</span>

Où <span class="code">dos2unix</span> est le script suivant :

<div class="code"><nowiki>#!/bin/bash</nowiki><br /> awk '{ sub("\r$", ""); print }' $1 > $2</div>

Variante, par Manisero (manisero chez freesurf point fr) :

<div class="code"><nowiki>#!/bin/bash</nowiki><br /> cat $1 | tr -d '\r' >$2</div>

==== Méthode 4 ====

Par Arnaud ASSAD (arhuman_at_hotmail_point_com

<code>perl -pi -e 's/\r//g'</code> fichieramodifier.extension

Accepte les widlcards :

<code>perl -pi -e 's/\r//g' *.c</code>

==== Méthode 5 ====

Par Marcopol (mlebas_at_labeille_point_net)

Voilà un sujet qui inspire beaucoup ici, voici une solution plus conventionelle :

<div class="code"> $ cat mon_fichier.txt | tr -d '\r' > mon_nouveau_fichier.txt </div>

Cette solution est une des plus simples, et moins lourde que d'utiliser perl, awk ou d'écrire un script.

==== Méthode 6 ====

Par Rémi Collet

C'est prévu dans vim, en utilisant set fileformat.

Ex : Supression des ^M

<div class="code"><nowiki>:set fileformat=unix</nowiki></div>

Ex : Ajout des ^M

<div class="code"><nowiki>:set fileformat=dos</nowiki></div>

Remarque : il y a même le format Mac.
[[Catégorie:Trucs_Administration]]

Trucs:Supprimer les ^M dans les fichiers ASCII - Historique des versions

Jiel le 24 mars 2016 à 15:18

Nicola : /* Méthode avec des encodeurs de formats de fichiers texte */

Nicola : + konwert

Nicola : /* Autre méthode avec ''vim'' */

Nicola : réorganisation + titraille

Legranblon : /* Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;) */

Legranblon : Méthode 7 : Pour ceux qui n'on vraiment pas de bol ;)