La présentation est en train de télécharger. S'il vous plaît, attendez

La présentation est en train de télécharger. S'il vous plaît, attendez

Projet Technique Un PDA multimodal au service des situation de handicap… DESS HANDI Université Paris XIII.

Présentations similaires


Présentation au sujet: "Projet Technique Un PDA multimodal au service des situation de handicap… DESS HANDI Université Paris XIII."— Transcription de la présentation:

1 Projet Technique Un PDA multimodal au service des situation de handicap… DESS HANDI Université Paris XIII

2 Projet Technique Equipe : Elisabeth Kraut Charlène Orange Philippe Longin Thierry Beyle Serge Cesarano Daniel Moreno

3 Projet Technique Plan 1-Présentation du Projet 2-Lanceur dapplications 3-Un bloc Note vocal 4-La commande vocale 5-Conclusion

4 Un PDA Multimodal…

5 Un PDA Multimodal… Interrogation au préalable des futurs utilisateurs du PDA r Public concerné : o Déficients visuels (fédération nationale des Aveugles), o Trisomiques (Association FAIT 21) Analyse des besoins

6 Un PDA Multimodal… Le Lanceur dapplications DESS HANDI Université Paris XIII

7 P1P2 P3P4 ZONE DE TEXTE B1B1 B2B2 3B3B B4B4 ParPar OkOk INF ENTRÉE Ecran tactile, zones P1 à P4 Boutons de lappareil, B1 à B4 Flèches de direction du Pad Molette redondante avec les flèches hautes et basses Module de reconnaissance dempreintes vocales Le Lanceur dapplications

8 P1P2 P3P4 ZONE DE TEXTE B1B1 B2B2 3B3B B4B4 ParPar OkOk INF SORTIE Utilisation de messages vocaux préenregistrés Positionnement dun « focus » visuel sur la zone sélectionnée : encadrement, clignotement, inversion vidéo Affichage de la définition de la zone pointée dans la zone de texte gros caractères Le Lanceur dapplications

9

10 Un PDA Multimodal… Le bloc notes Vocal DESS HANDI Université Paris XIII

11 Le Bloc Notes Vocal Objet r Définition du bloc notes r Lexistant € Windows CE € Voice Mate Bloc Notes de Windows CE

12 Le Bloc Notes Vocal Interfaces Utilisées r Interfaces dentrées TBoutons TCommande vocale TEcran tactile

13 Le Bloc Notes Vocal Interfaces Utilisées r Interfaces de sorties THaut Parleur TEcran

14 Le Bloc Notes Vocal Principes Ergonomiques r La Vocalisation o FeedBack o FeedBack Vocalisation des menus Vocalisation de déplacement FeedBack Ouverture de fenêtre Répétition vocale o Répétition vocale o Situation en cours

15 Le Bloc Notes Vocal Principes Ergonomiques r Interface clavier / Emulation de touche rTabulation / Maj Tabulation rFlèches rValider / Entrer Principe de fonctionnement Windows Principe de fonctionnement Windows

16 Le Bloc Notes Vocal Principes Ergonomiques r Paramétrage o Sonore (Augmenter / Diminuer, Actif / Silence) o Affichage (Couleur / Contraste…) + -

17 Le Bloc Notes Vocal Fonctionnalités R Ecouter / Pause R Avancer / Reculer R Piste suivante / Piste précédente R Enregistrer / Arrêter Enregistrement R Sauvegarder (Donner un nom, placer dans un dossier) R Créer un dossier R Rechercher R Effacer / Renommer

18 Conclusion / Perspectives Le Bloc Notes Vocal Perspectives et Conclusion

19 Un PDA Multimodal… La Commande Vocale DESS HANDI Université Paris XIII

20 La Commande Vocale Introduction r INTERFACE DEntrée: o Commande Vocale r qui complète: o Lécran Tactile Les Boutons o Les Boutons

21 La Commande Vocale Introduction r Utilisateurs: o Les Handicapés Visuels o Les Handicapés Lourds o Grand Public

22 La Commande Vocale Reconnaissance de la Parole: Schéma Fig. 1 Schéma Fonctionnel

23 La Commande Vocale Reconnaissance de la Parole r Choix: o Monolocuteur vs Multilocuteur o Codification: LPC vs STFT vs Analyse Cepstral o Comparaison: DTW

24 La Commande Vocale Méthodes: r Schéma:

25 La Commande Vocale Réalisation MATLAB r Étude Méthodes: o Matlab: r rImplémentation des méthodes Fenetrage Hamming, LPC, STFT et DTW r rEnregistrement de 1000 fichiers wav, différentes Liste de test en différentes langues r rPréparation environnement de Test: ( Études générés automatiquement, Étude de la complexité, temps de calcul sur PDA )

26 La Commande Vocale Réalisation TESTS r Résultats avec LPC: o Matlab: r rListe de mots 1: 17 mots -> 100 % r r Liste de mots 2: 20 mots -> 100 % r rListe de mots 2: 26 lettres Alphabet -> 65 %

27 La Commande Vocale Réalisation Embedded C++ r Architecture Logiciel: Module Enregistrement Dictionnaire Module Reconnaissance De la Parole Mots pour Enregistrer Référence a les Commandes a Reconnaître Validation Mot Reconu Application Extérieur Application Extérieur

28 La Commande Vocale Réalisation Embedded C++ r Intégration aux autres applications: o Module totalement indépendant : o Module totalement indépendant : Incorporation aux autres applications comme une DLL Utilisation transparent o Appelle a deux fonctions : o Appelle a deux fonctions : Fonction EnregistrerDictionnaire(Liste de Mots) Fonction RAP(Liste de Mots a linstant)

29 Un PDA multimodal… Perspectives et Conclusion


Télécharger ppt "Projet Technique Un PDA multimodal au service des situation de handicap… DESS HANDI Université Paris XIII."

Présentations similaires


Annonces Google