Nuvola apps important.png Attention, suite à une faille de sécurité, les liens vers les serveurs d'exploration ont été désactivés. Des actions de régénération sont en cours et quelques serveurs sont à nouveau accessibles.

-

Hiérarchie de Chomsky

De Wicri Informatique
logo travaux page importée de Wikipédia pour mettre au point les éléments d'écriture des articles d'informatique théorique
logo import Wikipédia Page importée de Wikipédia (Contenu soumis à la GFDL).

Source : Hiérarchie de Chomsky de Wikipédia en français (auteurs ).

Hiérarchie de Chomsky, avec classes de langages et classes d'automates associés


En informatique théorique, en théorie des langages, et en calculabilité, la hiérarchie de Chomsky est une classification des langages formels et des grammaires formelles, décrite par Noam Chomsky en 1956[1].

Les classes de langages L0, L1, L2, L3 (chaque langage étant un ensemble de mots) de la hiérarchie sont strictement imbriquées : '"`UNIQ--postMath-00000001-QINU`"'. Ici '"`UNIQ--postMath-00000002-QINU`"' est l'univers de tous les langages.

Définition

Une grammaire formelle est constituée de quatre objets :

  • '"`UNIQ--postMath-00000003-QINU`"' : ensemble fini de symboles terminaux, appelé alphabet terminal;
  • '"`UNIQ--postMath-00000004-QINU`"' : ensemble fini de symboles non terminaux ou alphabet des variables;
  • '"`UNIQ--postMath-00000005-QINU`"' : ensemble fini de règles;
  • '"`UNIQ--postMath-00000006-QINU`"' : axiome (symbole de départ).

Les alphabets '"`UNIQ--postMath-00000007-QINU`"' et '"`UNIQ--postMath-00000008-QINU`"' sont disjoints. L'alphabet terminal est parfois noté '"`UNIQ--postMath-00000009-QINU`"' ou '"`UNIQ--postMath-0000000A-QINU`"'. Dans la suite, on note '"`UNIQ--postMath-0000000B-QINU`"'.

Une règle est un couple '"`UNIQ--postMath-0000000C-QINU`"' de mots sur '"`UNIQ--postMath-0000000D-QINU`"', avec la condition que '"`UNIQ--postMath-0000000E-QINU`"' contient au moins une variable. On écrit souvent '"`UNIQ--postMath-0000000F-QINU`"' au lieu de '"`UNIQ--postMath-00000010-QINU`"'.

Une dérivation immédiate du mot '"`UNIQ--postMath-00000011-QINU`"' en le mot '"`UNIQ--postMath-00000012-QINU`"' consiste à remplacer, dans '"`UNIQ--postMath-00000013-QINU`"', une occurrence de '"`UNIQ--postMath-00000014-QINU`"' par '"`UNIQ--postMath-00000015-QINU`"'; en d'autres termes, '"`UNIQ--postMath-00000016-QINU`"' dérive immédiatement en '"`UNIQ--postMath-00000017-QINU`"' par l'emploi de la règle '"`UNIQ--postMath-00000018-QINU`"' si '"`UNIQ--postMath-00000019-QINU`"' et '"`UNIQ--postMath-0000001A-QINU`"' pour des mots '"`UNIQ--postMath-0000001B-QINU`"' et '"`UNIQ--postMath-0000001C-QINU`"'. Une dérivation est une suite de dérivations immédiates consécutives. En d'autres termes, la dérivation est la fermeture réflexive et transitive de la relation de dérivation immédiate.

Le langage engendré par une grammaire est l'ensemble des mots sur l'alphabet terminal, donc ne contenant plus de variables, qui l'on peut dériver à partir de l'axiome '"`UNIQ--postMath-0000001D-QINU`"'.

Les règles d'une grammaire définissent les lois d’enchâssement des mots du langage. Les langues naturelles ont une grammaire bien plus complexe que celle des langages de programmation ; il n’est pas possible de la formaliser entièrement de cette façon.

Quatre classes de grammaires et de langages

Chomsky a défini quatre classes de grammaires, nommées de type 0 à type 3, et donc aussi quatre classes de langages, engendrés par ces grammaires hiérarchiquement imbriquées. Les langages de type 0 sont les plus généraux: ce sont les langages récursivement énumérables. Ils contiennent les langages de type 1, les langages contextuels, en anglais « context-sensitive ». Les langages de type 2 sont appelés langage algébriques) ou « hors contexte », en anglais « context-free ». Ils contiennent eux-mêmes les langages de type 3, les langages « réguliers » ou langages rationnels. Parfois, on ajoute une dernière classe, composée des langages finis.

Type 0 : grammaires générales

Aucune restriction n'est imposée aux règles. Elles ont la forme :

'"`UNIQ--postMath-0000001E-QINU`"'

Ces grammaires génèrent la classe des langages récursivement énumérables. Ce sont exactement les langages reconnaissables par machine de Turing. Le problème de l'appartenance d'un mot à un langage de cette classe est indécidable.

Type 1 : grammaires contextuelles

Icône de détail Article détaillé : Grammaire contextuelle.

Les règles sont de la forme :

'"`UNIQ--postMath-0000001F-QINU`"'

Autrement dit, toute règle comprend un non-terminal entouré de deux mots qui décrivent le contexte dans lequel la variable peut être remplacée. Ces grammaires sont dites contextuelles (en anglais context-sensitive), car le remplacement d'un élément non-terminal peut dépendre des éléments autour de lui : son contexte. Les langages produits, appelés langages contextuels ou sensibles au contexte, sont exactement ceux reconnus par une machine de Turing non déterministe à mémoire linéairement bornée, appelés couramment automates linéairement bornés. D'autres formulations équivalentes existent pour les grammaires définissant les langages contextuels.

Type 2 : grammaires non contextuelles ou algébriques

Icône de détail Article détaillé : Grammaire non contextuelle.

Les règles sont de la forme :

'"`UNIQ--postMath-00000020-QINU`"'

Ce sont des grammaires contextuelles où le contexte est vide, ce qui signifie que les symboles non terminaux sont traités indépendamment de la place où ils apparaissent. Ces grammaires engendrent exactement les langages algébriques, appelés aussi langages hors contexte, langages acontextuels, ou langages non contextuels. Ils sont reconnus par un automate à pile.

Type 3 : grammaires régulières

Icône de détail Article détaillé : Grammaire régulière.

Les grammaires régulières sont soit les grammaires linéaires gauches ou les grammaires linéaires droites :

  • Dans les grammaires linéaires gauches, les règles sont de la forme :
'"`UNIQ--postMath-00000021-QINU`"'
  • Dans les grammaires linéaires droites, les règles sont de la forme :
'"`UNIQ--postMath-00000022-QINU`"'

Les grammaires régulières engendrent les langages rationnels. En effet, une grammaire régulière se transforme facilement en un automate fini (théorème de Kleene).

On ne peut pas autoriser les deux types de règles simultanément dans une grammaire sans sortir la classe des langages rationnels : on obtient les grammaires linéaires qui constituent une classe intermédiaire entre le type 2 et le type 3. Les règles d'une grammaire linéaire sont de la forme :

'"`UNIQ--postMath-00000023-QINU`"'

Récapitulation

Grammaire Language Automate Règles de production
Type-0 récursivement énumérable Machine de Turing '"`UNIQ--postMath-00000024-QINU`"'
Type-1 contextuel Automate linéairement borné '"`UNIQ--postMath-00000025-QINU`"'
Type-2 algébrique Automate à pile non déterministe '"`UNIQ--postMath-00000026-QINU`"'
Type-3 rationnel Automate fini '"`UNIQ--postMath-00000027-QINU`"'

Exemples

  • Langages réguliers :
    '"`UNIQ--postMath-00000028-QINU`"'.
  • Langages algébriques qui ne sont pas rationnels :
    '"`UNIQ--postMath-00000029-QINU`"', l'ensemble des palindromes (qui est même un langage linéaire, comme le précédent), le langage de Dyck
  • Langages contextuels qui ne sont pas algébriques :
    '"`UNIQ--postMath-0000002A-QINU`"'.

Voir aussi les exemples sur la page grammaire formelle. La théorie des langages formels dispose de nombreux outils pour affirmer, ou infirmer, le type d'un langage (rationnel, algébrique etc.). La construction explicite d'une grammaire reconnaissant un langage donné n'est pas toujours facile.

Raffinement de la hiérarchie de Chomsky

La hiérarchie originale de Chomsky comprenait quatre classes. On peut facilement en ajouter d'autres[2],[3],[4]:

  • entre le type 0 et le type 1, les langages récursifs, qui sont acceptés par les machines de Turing qui s'arrêtent toujours,
  • entre le type 1 et le type 2, les langages à Modèle:Lien, définis par des grammaires plus générales que les grammaires contextuelles,
  • entre le type 2 et le type 3, les langages algébriques déterministes, pour lesquels il existe une caractérisation par automate, mais pas par les grammaires[5].

Les grammaires d'arbres adjoints[6],[7] définissent une famille entre les langages algébriques et les langages contextuels. Ils sont acceptés par les automates à Modèle:Lien[8]. Ces grammaires font partie des grammaires qui permettent de mieux cerner la structure des langues naturelles, regroupés sous le nom Modèle:Lien[9].

D'autres raffinements existent, qui montrent que la structure n'est pas « linéaire »: par exemple, si l'on compare les langages linéaires et les langages algébriques déterministes, on s’aperçoit que ces familles ne sont pas contenues l'une dans l'autre.

Extension de cette hiérarchie

La hiérarchie de Chomsky concerne uniquement le domaine du calculable défini paradigmalement par ce que peut calculer une machine de Turing. Au delà existent d'autres hiérarchies de langages dont la hiérarchie arithmétique.

Bibliographie

  • Noam Chomsky,
    • 1959a On certain formal properties of grammars, Information and Control 2: 137–67.
    • 1959b A note on phrase structure grammars, Information and Control 2: 393–95.
    • 1962 Context-free grammars and and pushdown storage, RLE Quart.Prog. Rept. No. 65. Cambridge, Mass.: MIT.
  • John E. Hopcroft et Jeffrey D. Ullman, Introduction to Automata Theory, Languages and Computation, Addison-Wesley,
  • Daniel I. A. Cohen, Introduction to Computer Theory, John Wiley & Sons,
  • Erreur Lua dans package.lua à la ligne 80 : module 'Module:Nombre2texte/Data' not found.

Notes et références

  1. Modèle:Cite journal
  2. Cohen, 1997, Chap. 30 : The Chomsky Hierarchy
  3. Hopcroft, Ullman 1979, Chap. 9: The Chomsky Hierarchy. La réédition de cet ouvrage en 2001 avec Modèle:Lien ne comporte plus ce chapitre.
  4. Linz, 2001, Chap. 11.4 : The Chomsky Hierarchy.
  5. Hopcroft, Ullman 1979, Chap. 10 : Deterministic context-free languages.
  6. A.K. Joshi, L.S. Levy, et M. Takahashi, « Tree adjunct grammars », Journal of Computer Systems Science, 10(1), 1975.
  7. Unification-Based Tree Adjoining Grammars
  8. Modèle:Cite journal
  9. voir aussi: Robert McNaughton, «An insertion into the Chomsky hierarchy?», Jewels are forever, 1999, pages 204-212, et T. Jurdziński, K. Lorys, G. Niemann, F. Otto, «Some results on RWW- and RRWW-automata and their relation to the class of growing context-sensitive languages», Journal of Automata, Languages and Combinatorics, Volume 9 Numéro 4, Octobre 2004

Articles connexes

Modèle:Portail