Wicri:BourbakiV1

De Wicri Mathématiques

Cette page introduit les aspects techniques de la version BourbakiV1 du « Serveur d'exploration Bourbaki ».

Voir aussi :

Mise en œuvre

Sur la machine de développement

Initialisations

Génération des pages wikis
source IstexGetCorpusSize -q "bourbaki"
 IstexGenerAreaPages \
       -a BourbakiV1   \
       -m   \
       -g Bourbaki   \
         -x  2 \
       -p Mathematiques   \
       -w wicri-math.fr  \
       -W Wicri/Mathematiques   \
       -s PascalFrancis   \
       -s Hal   \
       -s PubMed   \
       -s Pmc   \
       -s Ncbi   \
       -z France   \
       -z UK   \
       -q "bourbaki"   \
       -t "Serveur d'exploration Bourbaki"
Définition $EXPLOR_AREA
EXPLOR_AREA=$WICRI_ROOT/Mathematiques/explor/Bourbaki.storage/BourbakiV1
export EXPLOR_AREA
export LC_ALL='C'
Création des répertoires
mkdir $WICRI_ROOT/Mathematiques/explor/Bourbaki.storage
mkdir $EXPLOR_AREA
mkdir $EXPLOR_AREA/Import

Sur la machine LorExplor

newgrp wicri
source /applis/lorexplor/Dilib/init.sh
Définition $EXPLOR_AREA
EXPLOR_AREA=$WICRI_ROOT/Mathematiques/explor/Bourbaki.storage/BourbakiV1
export EXPLOR_AREA
export LC_ALL='C'
Création des répertoires
mkdir $WICRI_ROOT/Mathematiques/explor/Bourbaki.storage
mkdir $EXPLOR_AREA
mkdir $EXPLOR_AREA/Import
mkdir $WICRI_ROOT/Mathematiques/explor/Bourbaki.storage/BourbakiV1.corpus
mkdir $WICRI_ROOT/Mathematiques/explor/Bourbaki.storage/BourbakiV1.corpus/Import

Construction du Repository ISTEX

En cas de reprise au niveau du téléchargement

Sous :

$WICRI_ROOT/Mathematiques/explor/Bourbaki.storage/BourbakiV1.corpus
rm -rf Import/IstexRepository.h*

<source lang="sh">
(
IstexGetCorpus -q '"nicolas bourbaki"' -l -s 4000 
IstexGetCorpus -q "bourbaki AND cartan" -l -s 4000 
IstexGetCorpus -q "bourbaki AND weil" -l -s 4000  
IstexGetCorpus -q "bourbaki AND delsarte" -l -s 4000  
) | sort -u > Import/IstexRepository.list


cat Import/IstexRepository.list \
     | IstexGetCorpusById -A                  \
     | SxmlUnIndent                            \
     | HfdBuild -bh Import/IstexRepository

Construction des métadonnées ISTEX

Construction du répertoire Import

Mettre mes liens vers le répertoire corpus

ISTEX, création du HFD Corpus Biblio
En cas de reprise:
rm -rf $EXPLOR_AREA/Import/IstexMetadata.h*
Construction corpus biblio
HfdCat Import/IstexRepository.hfd   \
  | SgmlFast -c1                                 \
  | IstexToTei                                   \
  | IstexCleanFullText                           \
  | TeiPutRefToIdno -t wicri:Area/Istex/Corpus  -c ISTEX -s Corpus -S Istex \
  | HfdBuild -h Import/IstexMetadata

Téléchargement des autres corpus

PubMed

Site : http://www.ncbi.nlm.nih.gov/pubmed

Requête :

Ranger le résultat dans $EXPLOR_AREA/Import/pubmed_result.xml

PubMed Central

Site : http://www.ncbi.nlm.nih.gov/pmc

Requête :

Ranger le résultat dans $EXPLOR_AREA/Import/pmc_result.xml

PascalFrancis

Site :http://stan2.demo.inist.fr/fr/

Requête :

Télécharger avec les onglets : Serveur / SGML / SGML / LF

  • résultat dans $EXPLOR_AREA/Import
 mv $EXPLOR_AREA/Import/corpus.txt $EXPLOR_AREA/Import/inistServer.txt 

Télécharger avec les onglets : SGML / SGML / SGML / LF

  • résultat dans $EXPLOR_AREA/Import
 mv $EXPLOR_AREA/Import/corpus.txt $EXPLOR_AREA/Import/inistStandard.txt 
Hal

Sur : https://hal.archives-ouvertes.fr/