Les fichiers générés et le matériel requis sont au format Pickle, spécifique au module Python "Pickle". Chaque fichier Jupyter Notebook est fourni dans trois formats différents : 1. PDF 2. CODE : affiché par nbviewer 3. le format BRUT : téléchargeable et ouvrable dans Python (nécessite Jupyter Notebook ou Google Colab). En cas d'absence de graphiques dans le fichier PDF, un fichier HTML est fourni en remplacement.
Veuillez noter que les fichiers ne sont pas tous suffisamment commentés pour le moment. Si un fichier en particulier vous intéresse, veuillez me le signaler et je le commenterai et le rendrai accessible sur la page dans les plus brefs délais.
Le symbole ✅ sera utilisé pour indiquer les fichiers qui ont été finalisés (ou presque) en termes de commentaires et d'organisation. Cela permettra aux utilisateurs de repérer facilement les fichiers prêts à être consultés avec une bonne structure et des commentaires appropriés.

• POS Tagging (étiquettage morpho-syntaxique)

  • Construction des features (Code) (Raw)
  • Construction des features bis (Code) (Raw)
  • Modélisation : logit avec pénalisation L₂
• Mesure de complexité

  • Extraction des textes (Code) (Raw) ✅
  • Construction des features
  • Modélisation
• Hotelling T² et covariance emp. pénalisée

  • Preparing true covariance matrix

    • True covariance matrix (Diagonal case) (Code) (Raw)
    • Necessary material: n_list ; q_list
  • Simulations Monte Carlo

    • Generate samples - dependent, s = 0.6 (Code)(Raw)
    • Generate samples - dependent, s= 0.99 (Code)(Raw)
    • Generate samples - independent, d0.6 (Code)(Raw)
    • Generate samples - independent, d0.99 (Code)(Raw)
    • Necessary material: vp_collection_d06, vp_collection_d099
    • Generated files: data_d_s0.6, data_d_s0.99, data_vp_collection_d06, data_vp_collection_d099
  • Représentations graphiques

    • Graphiques (Code)(Raw)
    • Graphiques bis (Code)(Raw)
• Réseaux de neurones

  • Un réseau de neurones simple (1 neurone) (Code) ✅
• Autre outils

  • API Wikipedia
  • À venir

Des améliorations sont prévues pour chaque fichier notebook, notamment :

1. Commentaires détaillés dans toutes les cellules, avec une organisation claire.
2. Suppression des brouillons et des cellules non nécessaires, regroupement des fichiers fragmentés en un seul.
3. Mention et reconnaissance des personnes ayant servi d'inspiration dans le notebook, avec une signature appropriée.
4. Création d'un module Python permettant aux utilisateurs d'importer les données et de calculer la matrice de covariance pénalisée, ainsi que des régions de confiance et des tests, pour des travaux en grande dimension où la matrice de covariance n'est pas de plein rang.
5. Développement d'un outil permettant à tout utilisateur de construire un modèle de classification log-linéaire en utilisant le même choix de pénalité proposé dans le chapitre II de ma thèse.

Ces améliorations futures visent à rendre les fichiers plus accessibles, plus ordonnés et plus conviviaux tout en garantissant un niveau de professionnalisme élevé.

Getting textual data from different resources, processing these data, building models. For beginners, it's better to start with the Python and nltk introduction file.

Extracting and reading data (Source)
Reading PDF (numerical documents)
Reading image (scanned documents)
Extracting texts from the web (using urllib and re packages, using beautifulsoup)

Precessing data
Python and nltk introduction
Acessing corpora
Functions
Little applications : Dictionnary and synonym Word embedding (transforming words to vectors: discrete-sparse, and continuous-dense methods)

Modelisation
Classical methods
Deep Neural Networks