IDA Wiki

Vorlesung Einführung in Maschinelles Lernen

Termine und Informationen

Es handelt sich um eine integrierte Vorlesung mit Übung. Dieser Kurs ist eine Basisveranstaltung. Siehe auch den Eintrag im Vorlesungsverzeichnis

Vorlesung

Donnerstags, 10 - 12 (ab 15.10.2009)

Raum

FR 7039

Übung

Donnerstags, 12 - 14 (ab 15.10.2009)

Raum

FR 7039

Dozenten

Prof. Dr. Klaus-Robert Müller

Dr. Mikio Braun

Sprechzeiten

Prof. Dr. Klaus-Robert Müller: nach Vereinbarung

Dr. Mikio Braun: nach Vereinbarung

Es gibt eine Google group, in der aktuelle Ankündigungen zur Vorlesung zu finden sind. Dort können auch Fragen gestellt werden (z.B. Fehler auf dem Aufgabenblatt). Man muß angemeldet sein, um die Inhalte lesen zu können, der Zugang ist jedoch jedem offen.

Themen

Die Vorlesung behandelt einführende Themen im Bereich des maschinellen Lernens.

Im Einzelnen wird sich die Vorlesung mit den folgenden Themen beschäftigen:

Im Anschluss an die Vorlesung findet die Übung statt, in der die erlernten Methoden vertieft werden.

Vorkenntnisse

Kenntnisse in Linearer Algebra und Grundkenntnisse in Wahrscheinlichkeitsrechnungsind werden vorausgesetzt. Zur Lösung eines Teils der Hausaufgaben werden Kenntnisse in einer mathematischen/statistischen Software benötigt. Wir empfehlen die Benutzung von matlab bzw. octave. Letzteres ist unter www.octave.org frei erhältlich. Matlab ist auf dem vom irb verwalteten System installiert und kann mit /home/ml/ml/bin/matlab gestartet werden.

Übungen

Die Übungsleistung geht in die Gesamtbenotung ein. Mindestens 50% der Übungen müssen bearbeitet werden, um zur abschließenden mündlichen Prüfung zugelassen zu werden.

Einige Hinweise zu den Abgaben:

  1. Die Lösungen zu theoretischen Aufgaben sind handschriftlich abzugeben.

  2. Die praktischen Aufgaben werden über ein Webinterface abgegeben (wird jeweils bekanntgegeben).
  3. Die Übungsblätter dürfen in Zweiergruppen bearbeitet und abgegeben werden, die Zusammensetzung sollte sich jedoch nicht ändern.

Darüber hinaus beachtet bitte folgende Hinweise:

Folgene Bücher geben eine umfassende Einführung in den Bereich des Maschinellen Lernens.

Folgende Bücher geben eine umfassende Einführung in die Wahrscheinlichkeitstheorie und in die Statistik.

Die wichtigsten Gleichungen für das Rechnen mit Matrizen und insbesondere die Ableitungsregeln für höherdimensionale Funktionen findet man hier:

Terminplan

Datum

Thema

Material

15. 10. 2009

Einführung und die Bayesregel

22. 10. 2009

Diskriminanzfunktionen und Maximum-Likelihood

29. 10. 2009

Principal Component Analysis

5. 11. 2009

Independent Component Analysis

12. 11. 2009

Clustering

clustering_slides.pdf

19. 11. 2009

Klassifizierung, Fisher-Diskriminanzanalyse

FDA_and_LSR.pdf

26. 11. 2009

k-nächste Nachbarregel, Regression

3. 12. 2009

Modellselektion und Verlustfunktion

10. 12. 2009

Statistisches Testen

p-values.pdf

17. 12. 2009

Statistische Lerntheorie

lect_kernelmethods.pdf

7. 1. 2009

Kerntrick und Support-Vektor-Machines, Kernel-PCA, Kernel-FDA

14. 1. 2009

Neuronale Netze und Radialbasisfunktionsnetze

21. 1. 2009

Gausssche Prozesse

Paper "Gaussian Processes in Machine Learning", Online Buch "Gaussian Processes for Machine Learning"

28. 1. 2009

Graphische Modelle

bayes_net_slides.pdf

4. 2. 2009

Expectation-Maximization-Algorithmus und Mixturmodelle

EM-algo_slides.pdf

11. 2. 2009

Zusammenfassung und Ausblick

Übungsblatter

IDA Wiki: Main/WS09_MaschinellesLernen1 (last edited 2010-02-04 11:34:00 by PaulBuenau)