Stratégies de fusion pour des signaux écrits et sonores : application à la reconnaissance d expressions mathématiques

L'être humain dans sa quête de mise en œuvre d'un dialogue le plus naturel possible avec sa machine s'inspire continuellement de la machine la plus perfectionnée connue à ce jour : l'être humain lui-même. Une caractéristique forte du dialogue entre humains est le recours à la mul...

Description complète

Enregistré dans:
Détails bibliographiques
Auteurs principaux : Medjkoune Sofiane (Auteur), Viard-Gaudin Christian (Directeur de thèse, Membre du jury), Mouchère Harold (Directeur de thèse, Membre du jury), Petitrenaud Simon (Directeur de thèse, Membre du jury), Bloch Isabelle (Président du jury de soutenance, Membre du jury), Artières Thierry (Rapporteur de la thèse, Membre du jury), Coüasnon Bertrand (Rapporteur de la thèse, Membre du jury)
Collectivités auteurs : Université de Nantes 1962-2021 (Organisme de soutenance), Université de Nantes Faculté des sciences et des techniques (Organisme de soutenance), École doctorale Sciences et technologies de l'information et mathématiques Nantes (Ecole doctorale associée à la thèse), Institut de recherche en communications et cybernétique Nantes 1958-2017 (Laboratoire associé à la thèse)
Format : Thèse ou mémoire
Langue : français
anglais
Titre complet : Stratégies de fusion pour des signaux écrits et sonores : application à la reconnaissance d expressions mathématiques / Sofiane Medjkoune; sous la direction de Christian Viard-Gaudin ; encadrants Harold Mouchère et Simon Petitrenaud
Publié : [S.l.] : [s.n.] , 2013
Accès en ligne : Accès Nantes Université
Note de thèse : Thèse de doctorat : Informatique et applications : Nantes : 2013
Sujets :
Documents associés : Reproduction de: Stratégies de fusion pour des signaux écrits et sonores
LEADER 06438clm a2200625 4500
001 PPN183721411
003 http://www.sudoc.fr/183721411
005 20240531154500.0
029 |a FR  |b 2013NANT2055 
035 |a (OCoLC)1247886434 
100 |a 20150216d2013 k y|frey0103 ba 
101 0 |a fre  |a eng  |d fre  |d eng  |2 639-2 
102 |a FR 
105 |a ||||v 00||| 
135 |a |r||||||||||| 
181 1 |6 z01  |c txt  |2 rdacontent 
181 1 |6 z01  |a i#  |b xxxe## 
182 1 |6 z01  |c c  |2 rdamedia 
182 1 |6 z01  |a b 
200 1 |a Stratégies de fusion pour des signaux écrits et sonores  |e application à la reconnaissance d expressions mathématiques  |f Sofiane Medjkoune  |g sous la direction de Christian Viard-Gaudin ; encadrants Harold Mouchère et Simon Petitrenaud 
210 |a [S.l.]  |c [s.n.]  |d 2013 
230 |a Données textuelles 
314 |a Ecole(s) Doctorale(s) : École doctorale sciences et technologies de l'information et de mathématiques (Nantes) 
314 |a Partenaire(s) de recherche : Institut de recherche en communications et cybernétique (IRCCyN) (Nantes) (Laboratoire) 
314 |a Autre(s) contribution(s) : Isabelle Bloch (Président du jury) ; Bertrand Couasnon, Thierry Artières, Harold Mouchère, Simon Petit-Renaud (Membre(s) du jury) ; Bertrand Couasnon, Thierry Artières (Rapporteur(s)) 
320 |a Références bibliographiques 
325 1 |a La thèse papier est la seule version officielle 
328 |b Thèse de doctorat  |c Informatique et applications  |e Nantes  |d 2013 
330 |a L'être humain dans sa quête de mise en œuvre d'un dialogue le plus naturel possible avec sa machine s'inspire continuellement de la machine la plus perfectionnée connue à ce jour : l'être humain lui-même. Une caractéristique forte du dialogue entre humains est le recours à la multi-modalité. Le travail rapporté dans ce manuscrit porte sur l'étude, la conception et la validation d'un système de reconnaissance des expressions mathématiques, classe particulière de structures bidimensionnelles. Ce système est développé dans un cadre bimodal où l'on considère de façon complémentaire l'écriture manuscrite et la parole. La complémentarité qui existe entre ces deux modalités a été vérifiée et exploitée à profit dans notre système, d'abord dans un cadre simplifié qui est celui de la reconnaissance des symboles mathématiques isolés, puis dans un cadre plus général et plus réaliste, celui des expressions mathématiques complètes. La mise en place de ce système bimodal et sa validation requérant la disponibilité de données bimodales, nous avons collecté, complètement annoté et mis à disposition une base, nommée HAMEX, contenant 4350 expressions bimodales couvrant différents domaines. Nous montrons comment utiliser la transcription automatique de la dictée d'une expression pour guider le système de reconnaissance du signal manuscrit pour obtenir des résultats supérieurs au système monomodal. Les performances de ce système s'avèrent être meilleures que celles d'un système mono-modal basé uniquement sur le signal manuscrit seul. 
330 |a Significant efforts are being done to make as natural as possible the way that human are interacting with their machines. Regarding this quest, a lot of research is being inspired by the most sophisticated machine ever known : human being and more precisely his use of the multi-modality aspect of the information to interact with his peers. The work reported here concerns the study, the conception and the validation of bidimensional structure recognition systems. The application considered here is the mathematical expression language which is one of the most interesting 2D languages. The system we proposed is original since it uses simultaneously two modalities to achieve its task. Indeed, both speech and handwriting streams are used by our system to perform the recognition in a bimodal fashion. This procedure allows dealing with the ambiguities arising when mono-modal processing is used. This system exploits the existing complementarity between the modalities in concern and exhibits an improvement of the performances with respect to the case of a mono-modal processing using only handwriting modality. To set-up, train and validate our system we built HAMEX, a bimodal database of mathematical expressions. This latter, is formed by 4350 mathematical expressions, each available in handwritten and audio forms and is fully annotated. 
455 | |0 183721144  |t Stratégies de fusion pour des signaux écrits et sonores  |o application à la reconnaissance d expressions mathématiques  |f Sofiane Medjkoune  |c [S.l.]  |n [s.n.]  |d 2013  |p 1 vol. (206 p.) 
541 | |a Fusion strategies for handwritten and audio strams : application for mathematical expressions recognition  |z eng 
606 |3 PPN027234541  |a Intelligence artificielle  |2 rameau 
606 |3 PPN027242293  |a Reconnaissance automatique de la parole  |2 rameau 
606 |3 PPN029410312  |a Interaction humain-machine  |2 rameau 
606 |3 PPN033258988  |a Fusion multicapteurs  |2 rameau 
608 |3 PPN027253139  |a Thèses et écrits académiques  |2 rameau 
610 0 |a Multimodalité 
686 |a 620  |2 TEF 
700 1 |3 PPN183687272  |a Medjkoune  |b Sofiane  |f 1984-....  |4 070 
701 1 |3 PPN098591045  |a Viard-Gaudin  |b Christian  |4 727  |4 555 
701 1 |3 PPN124893929  |a Mouchère  |b Harold  |f 1981- ....  |4 727  |4 555 
701 1 |3 PPN183687515  |a Petitrenaud  |b Simon  |f 19..-....  |4 727  |4 555 
701 1 |3 PPN031277861  |a Bloch  |b Isabelle  |f 19..-....  |c mathématicienne, spécialiste du traitement des images  |4 956  |4 555 
701 1 |3 PPN144311992  |a Artières  |b Thierry  |f 19..-....  |c chercheur en informatique  |4 958  |4 555 
701 1 |3 PPN077114094  |a Coüasnon  |b Bertrand  |4 958  |4 555 
711 0 2 |3 PPN026403447  |a Université de Nantes  |c 1962-2021  |4 295 
711 0 2 |3 PPN033124884  |a Université de Nantes  |b Faculté des sciences et des techniques  |4 295 
711 0 2 |3 PPN134103211  |a École doctorale Sciences et technologies de l'information et mathématiques  |c Nantes  |4 996 
711 0 2 |3 PPN113164726  |a Institut de recherche en communications et cybernétique  |c Nantes  |f 1958-2017  |4 981 
801 3 |a FR  |b Abes  |c 20230206  |g AFNOR 
856 4 |q PDF  |u https://archive.bu.univ-nantes.fr/pollux/show/show?id=7e558fb3-2b8c-441c-be3e-ccf706c7952c  |2 accès au texte intégral de la thèse 
979 |a SCI 
930 |5 441092104:522485650  |b 441092104  |j g 
998 |a 668000