Diskriminatives Lernen von graphischen Modellen
Discriminative Learning of Graphical Models
Wissenschaftsdisziplinen
Informatik (100%)
Keywords
-
Bayesian Networks,
Diskriminative Learning,
Parameter and Structure Learning,
Machine Learning,
Muiltipitsch Tracking
Graphische Modelle etablierten sich als Methode für die Repräsentation von Ungewissheit im Gebiet des maschinellen Lernens. Derzeit sind zwei Forschungsschwerpunkte in der Wissenschaftsgemeinschaft von besonderem Interesse: Einerseits wird der Analyse und Entwicklung von effizienten Inferenzmethoden viel Aufmerksamkeit gewidmet, exempli gratia, loopy belief propagation, Variational-Methoden, Samplingmethoden, Konkav-Konvex-Prozedur et cetera. Andererseits wird dem Parameter- und Strukturlernen von gerichteten graphischen Modellen besondere Bedeutung beigemessen. Grundsätzlich gibt es zwei Paradigmen des Lernens: Generatives und diskriminatives Lernen. Das generatives Lernen ist mittlerweile für gerichtete graphische Modelle gut erforscht, wohingegen diskriminatives Lernen noch viel Forschungspotential in sich birgt, da die meisten Methoden durch den hohen Rechenaufwand begrenzt sind. Das Forschungsvorhaben ist im Bereich des diskriminativen Lernens von graphischen Modellen. Es soll an diskriminativen Struktur- und Parameterlernalgorithmen für Bayessche Netzwerke und dynamische Bayessche Netzwerke gearbeitet werden. Eine Herausforderung stellt dabei die benötigte Rechenintensität dar. Die entwickelten Algorithmen werden auf Sprach- und Bildverarbeitungsprobleme angewendet, im Besonderen auf einkanalige Quellentrennung, gleichzeitiges Verfolgen der Grundfrequenz mehrerer Sprecher und das gleichzeitige Verfolgen mehrerer Bildobjekte.
Graphische Modelle etablierten sich als Methode für die Repräsentation von Ungewissheit im Gebiet des maschinellen Lernens. Derzeit sind zwei Forschungsschwerpunkte in der Wissenschaftsgemeinschaft von besonderem Interesse: Einerseits wird der Analyse und Entwicklung von effizienten Inferenzmethoden viel Aufmerksamkeit gewidmet. Andererseits wird dem Parameter- und Strukturlernen von gerichteten graphischen Modellen besondere Bedeutung beigemessen. Grundsätzlich gibt es zwei Paradigmen des Lernens: Generatives und diskriminatives Lernen. Das generatives Lernen ist mittlerweile für gerichtete graphische Modelle gut erforscht, wohingegen diskriminatives Lernen noch viel Forschungspotential in sich birgt, da die meisten Methoden durch den hohen Rechenaufwand begrenzt sind.In diesem Forschungsvorhaben wurden diskriminative Lernverfahren von graphischen Modellen entwickelt. Dabei wurden neue diskriminative Struktur- und Parameter-lernalgorithmen für Bayesische Netzwerke erforscht. Weiters wurde der Einfluss von Parameterquantisierung auf die Klassifikationsrate untersucht. Die entwickelten Algorithmen wurden anhand von Sprach- und Bildverarbeitungsproblemen evaluiert; im Besonderen auf einkanalige Quellentrennung, gleichzeitiges Verfolgen der Grundfrequenz mehrerer Sprecher, Klassifizierung von handgeschriebenen Zahlen und im Bereich der Fernerkundung.
- Technische Universität Graz - 100%
- G Zweig, University of Washington - Vereinigte Staaten von Amerika
- Jeff Bilmes, University of Washington - Vereinigte Staaten von Amerika
Research Output
- 372 Zitationen
- 30 Publikationen
-
2013
Titel Greedy Part-Wise Learning of Sum-Product Networks DOI 10.1007/978-3-642-40991-2_39 Typ Book Chapter Autor Peharz R Verlag Springer Nature Seiten 612-627 -
2013
Titel Model-Based Multiple Pitch Tracking Using Factorial HMMs: Model Adaptation and Inference DOI 10.1109/tasl.2013.2260744 Typ Journal Article Autor Wohlmayr M Journal IEEE Transactions on Audio, Speech, and Language Processing Seiten 1742-1754 -
2013
Titel BOUNDS FOR BAYESIAN NETWORK CLASSIFIERS WITH REDUCED PRECISION PARAMETERS DOI 10.1109/icassp.2013.6638280 Typ Conference Proceeding Abstract Autor Tschiatschek S Seiten 3357-3361 -
2014
Titel Introduction to Probabilistic Graphical Models. Typ Journal Article Autor Pernkopf F Journal Academic Press Library in Signal Processing -
2014
Titel Chapter 18 Introduction to Probabilistic Graphical Models DOI 10.1016/b978-0-12-396502-8.00018-8 Typ Book Chapter Autor Pernkopf F Verlag Elsevier Seiten 989-1064 -
2012
Titel Handling Missing Features in Maximum Margin Bayesian Network Classifiers. Typ Conference Proceeding Abstract Autor Pernkopf F Et Al -
2012
Titel Exact Maximum Margin Structure Learning of Bayesian Networks DOI 10.48550/arxiv.1206.6431 Typ Preprint Autor Peharz R -
2012
Titel Bayesian Network Classifiers with Reduced Precision Parameters DOI 10.1007/978-3-642-33460-3_10 Typ Book Chapter Autor Tschiatschek S Verlag Springer Nature Seiten 74-89 Link Publikation -
2012
Titel ON LINEAR AND MIXMAX INTERACTION MODELS FOR SINGLE CHANNEL SOURCE SEPARATION DOI 10.1109/icassp.2012.6287864 Typ Conference Proceeding Abstract Autor Peharz R Seiten 249-252 -
2012
Titel Convex Combinations of Maximum Margin Bayesian Net-work Classifiers. Typ Conference Proceeding Abstract Autor Pernkopf F Konferenz International Conference on Pattern Recognition Applications and Methods (ICPRAM) -
2012
Titel Sparse nonnegative matrix factorization with l0-constraints DOI 10.1016/j.neucom.2011.09.024 Typ Journal Article Autor Peharz R Journal Neurocomputing Seiten 38-46 Link Publikation -
2012
Titel HANDLING MISSING FEATURES IN MAXIMUM MARGIN BAYESIAN NETWORK CLASSIFIERS DOI 10.1109/mlsp.2012.6349804 Typ Conference Proceeding Abstract Autor Tschiatschek S Seiten 1-6 -
2011
Titel Maximum Margin Bayesian Network Classifiers DOI 10.1109/tpami.2011.149 Typ Journal Article Autor Pernkopf F Journal IEEE Transactions on Pattern Analysis and Machine Intelligence Seiten 521-532 -
2011
Titel Exact Maximum Margin Structure Learning of Bayesian Net-works. Typ Conference Proceeding Abstract Autor Peharz R -
2013
Titel MODEL ADAPTATION OF FACTORIAL HMMS FOR MULTIPITCH TRACKING DOI 10.1109/icassp.2013.6638977 Typ Conference Proceeding Abstract Autor Wohlmayr M Seiten 6792-6796 -
2013
Titel Stochastic margin-based structure learning of Bayesian network classifiers DOI 10.1016/j.patcog.2012.08.007 Typ Journal Article Autor Pernkopf F Journal Pattern Recognition Seiten 464-471 Link Publikation -
2013
Titel Bound for Bayesian Network Classifiers with Reduced Precision Parameters. Typ Conference Proceeding Abstract Autor Pernkopf F Et Al -
2013
Titel The Most Generative Maximum Margin Bayesian Networks. Typ Conference Proceeding Abstract Autor Peharz R -
2013
Titel Asymptotic Optimality of Maximum Margin Bayesian Net-works. Typ Conference Proceeding Abstract Autor Pernkopf F Konferenz AISTATS -
2010
Titel A Probabilistic Interaction Model for Multipitch Tracking with Factorial Hidden Markov Models DOI 10.1109/tasl.2010.2064309 Typ Journal Article Autor Wohlmayr M Journal IEEE Transactions on Audio, Speech, and Language Processing Seiten 799-810 -
2010
Titel A factorial sparse coder model for single channel source Separation. Typ Conference Proceeding Abstract Autor Peharz R -
2010
Titel Large Margin Learning of Bayesian Classifiers Based on Gaussian Mixture Models DOI 10.1007/978-3-642-15939-8_4 Typ Book Chapter Autor Pernkopf F Verlag Springer Nature Seiten 50-66 -
2010
Titel SPARSE NONNEGATIVE MATRIX FACTORIZATION USING $\ell^{0}$-CONSTRAINTS DOI 10.1109/mlsp.2010.5589219 Typ Conference Proceeding Abstract Autor Peharz: R Seiten 83-88 -
2010
Titel A factorial sparse coder model for single channel source separation DOI 10.21437/interspeech.2010-166 Typ Conference Proceeding Abstract Autor Peharz R Seiten 386-389 -
2010
Titel Sparse Nonnegative Matrix Factorization using l0 Constraints. Typ Journal Article Autor Peharz R -
2011
Titel A Pitch Tracking Corpus with Evaluation on Multipitch Tracking Scenario. Typ Conference Proceeding Abstract Autor Pernkopf F Et Al -
2011
Titel MAXIMUM MARGIN STRUCTURE LEARNING OF BAYESIAN NETWORK CLASSIFIERS DOI 10.1109/icassp.2011.5946734 Typ Conference Proceeding Abstract Autor Pernkopf F Seiten 2076-2079 -
2011
Titel GAIN-ROBUST MULTI-PITCH TRACKING USING SPARSE NONNEGATIVE MATRIX FACTORIZATION DOI 10.1109/icassp.2011.5947583 Typ Conference Proceeding Abstract Autor Peharz R Seiten 5416-5419 -
2011
Titel EM-based Gain Adaptation for Probabilistic Multipitch Tracking. Typ Conference Proceeding Abstract Autor Pernkopf F -
2011
Titel EFFICIENT IMPLEMENTATION OF PROBABILISTIC MULTI-PITCH TRACKING DOI 10.1109/icassp.2011.5947582 Typ Conference Proceeding Abstract Autor Wohlmayr M Seiten 5412-5415