https://wicri-demo.istex.fr/Wicri/Outils/fr/index.php?action=history&feed=atom&title=Dilib%2C_module_Utf8Dilib, module Utf8 - Historique des versions2026-04-19T11:57:47ZHistorique des versions pour cette page sur le wikiMediaWiki 1.31.10https://wicri-demo.istex.fr/Wicri/Outils/fr/index.php?title=Dilib,_module_Utf8&diff=3629&oldid=previmported>Jacques Ducloy : 1 révision importée2017-06-16T17:50:45Z<p>1 révision importée</p>
<table class="diff diff-contentalign-left" data-mw="interface">
<tr class="diff-title" lang="fr">
<td colspan="1" style="background-color: #fff; color: #222; text-align: center;">← Version précédente</td>
<td colspan="1" style="background-color: #fff; color: #222; text-align: center;">Version du 16 juin 2017 à 17:50</td>
</tr><tr><td colspan="2" class="diff-notice" lang="fr"><div class="mw-diff-empty">(Aucune différence)</div>
</td></tr></table>imported>Jacques Ducloyhttps://wicri-demo.istex.fr/Wicri/Outils/fr/index.php?title=Dilib,_module_Utf8&diff=3628&oldid=previmported>Jacques Ducloy le 10 novembre 2015 à 09:392015-11-10T09:39:20Z<p></p>
<p><b>Nouvelle page</b></p><div>{{Dilib header|module=Utf8}}<br />
Le module '''Utf8''' contient un ensemble de fonctions et de commandes autour du codage unicode UTF-8.<br />
<br />
Il contient également des (petits) outils linguistiques qui sont complétés dans des modules spécifiques à une langue donnée (voir [[Dilib, module Eng]]).<br />
{{Début 2 colonnes}}<br />
__TOC__<br />
{{Saut 2 colonnes}}<br />
{{Dilib, boîte déroulante<br />
|titre=Liste des modules Dilib<br />
|contenu={{Dilib, liste des modules}}<br />
}}<br />
{{Dilib, boîte déroulante<br />
|titre=Module Utf8<br />
|contenu={{Dilib, module Utf8}}<br />
}}<br />
{{Fin 2 colonnes}}<br />
==Commandes orientées utilisateur==<br />
===Commande <code>Utf8ToLc</code>===<br />
Cette commande réalise des transcodages à partir de données en Utf8.<br />
Cette commande permet de convertir des textes codées en UTF 8 dans une forme dérivée.<br />
;Synopsis:<br />
<code><br />
:'''Utf8ToLc''' '''-ks''' ['''-K''' ''keySeparator''] <br />
</code><br />
;Options:<br />
:<code>'''-k'''</code> (''key'') : cette option limite le transcodage à la première partie d'un enregistrement Sxml.<br />
;Exemple:<br />
Le script suivant :<br />
<source lang="sh"><br />
Utf8ToLc -k -K ";" <<...<br />
Élément ; Élément<br />
...<br />
</source><br />
produit :<br />
<source lang="sh"><br />
élément ; Élément<br />
</source><br />
<br />
==Fonctions orientées utilisateur==<br />
<br />
==Fonctions orientées développement==<br />
===Type <code>Utf8Converter</code>===<br />
Le type Utf8Converter est utilisé pour gérer des transformations de chaines en codage UTF8. Il contient trois éléments :<br />
* un pointeur sur la chaîne en cours de conversion,<br />
* un [[Dilib, module Buffer|élément de type Buffer]] pour le texte résultant,<br />
* un indicateur de traitement.<br />
==Outils expérimentaux orientés TAL==<br />
En attendant la mise en place d'outils plus consistants dans l'environnement Wicri, une commande permet d'effectuer un premier niveau de lemmatisation pour extraire des termes d'un texte en utilisant des listes de mots vides.<br />
* [[Dilib, Module Utf8, commande Utf8SplitWordUsual|Utf8SplitWordUsual]]<br />
* [[Dilib, Module Utf8, table Utf8StopWordEn|Utf8StopWordEn]]</div>imported>Jacques Ducloy