Vorlesung Multimediale Werkzeuge

Vorlesungen: 2017: Do 13:00 – 14:30Uhr, Sr HU013

Übungen: 2017: Do 15:00 -16:30, Sr H1520b

Prof. Dr.-Ing. Gerald Schuller

Email: gerald.schuller@tu-ilmenau.de

PDF Dateien der Folien auf UNI-Webseite:

Link: http://www.tu-ilmenau.de/mt/lehrveranstaltungen/bachelor-mt/multimediale-
werkzeuge/
Auch: https://moodle2.tu-ilmenau.de/login/index.php

Hinweise:
• Bitte die Webseite regelmäßig auf Updates überprüfen!
• Zwischenfragen erwünscht!

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
The course has 4 LP, each LP is about 2-3 hours
per week, which means we have 8-12 hours total
per week or 12-18 hours for 2 weeks (the
homework cycle, about 6-8 hours per homework
assignment).

We will use the system Moodle for information

exchange and for small assignments.
We will have weekly quizzes with small
computation tasks, which need to be done
indiviually.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 -Goal: To be able to solve problems in the
area of Multimedia, like how to design mobile
apps..
-Approach: Memorize only the most basic facts
or properties, like the definition of the z-
transform, then know how to use them (like
how to derive the z-transform of a delayed
signal). This is a skill.

As an Engineer, we need to get something to

work or to function in the end. Engineering is
also like applied physics, we need the theory
and then the experimental verification.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Lectures (as opposed to pure electronic
learning) have the advantage that we can talk to
each other, and that in this way the content can
be tailored to your background. So you should
ask questions, and also short discussions are
beneficial in this way.

Die Punkte der Hausaufgaben gehen zu 30% in

die Endnote ein, 70% kommen von der Klausur
am Ende des Semesters
Es gibt kleine Aufgaben im System Moodle2, die
zu 25% zu den Hausaufgaben zählen (im
System anmelden), und die wöchentlich nach
den Vorlesungen aufgegeben werden, und nach
einer Woche fertig sein müssen. Zum Bestehen
muss die Klausur bestanden werden.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Beachte: Die Folien sollen kein Lehrbuch
ersetzen, sondern sind Erklaerungshilfe fuer die
Vorlesung. Zum Sebststudium sind in den Folien
wiederholt Verweise auf Buecher und Webseiten.
Die Folien sind absichtlich im Editiermodus
gehalten, weil sie wie eine Tafel funktionieren
sollen. Auf die Weise koennen wir flexibel auf
Fragen von Studenten eingehen, und die
Antworten gleich mit einpflegen. Einer der
Hauptzwecke der Vorlesung soll sein, Fragen zu
beantworten.
Die neuesten Versionen der Folien erscheinen
dann auf der Vorlesungs-Webseite bzw. unter
Moodle.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 ● Scientific Literature Work
When reading papers, check each information you
deem as important by reading the corresponding
references and check them by checking their
references, until you reach the source of the
information.
For information that is claimed as original, do an
internet search on similar results.
For formulas, check them by programming them
(e.g. in Python), and see if you can reproduce the
results presented in the paper. If there is not enough
information to reproduce the results, or the results
differ significantly, that is a bad sign.
For paper writing, reference every information that you
deem important or relevant to the source where you‘ve
got your information from. These references are
important for reproducable research, and they are also
the „currency“ of science, because scientists get their
reputation from other people referencing them. Omitting
them is like „stealing“ or cheating.
If you are presenting algorithms or programs, prensent
them in formuals or pseudo-code in such a way that
other people can reproduce your results (again,
reproducable research). Check your formulas by
programming them yourself, and see if they work. If
you get error messages or wrong results, this shows that
your formula has a problem.
Vorlesung Multimediale Werkzeuge
Übungen:

Leitung: Oleg Golokolenko

Email: oleg.golokolenko@tu-ilmenau.de

Hinweise:
• Es gibt regelmäßig Hausaufgaben, die in den Übungen
vorzuzeigen sind und bewertet werden. Deren Punkte gehen zu
30% in die Endnote ein. Diese Aufgaben sollen in Gruppen zu
max. 3 Leuten gemeinsam bearbeitet werden.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
For homework assignments we will use Open Source software like Linux
and Python:
https://www.python.org/
We recommend to use Linux as operating system, for instance Ubuntu,
because that's where Python is easiest. There, Python is already installed,
and the installation of all packages can be done easily from the software
manager.
We will also need the OpenCV Library for Python. In Linux, this is the
software package “python-opencv”. This already contains a few Python
examples. And this even works on a Raspberry Pi!
Python is a very high level programming language, which contains the
convenience and capabilities of Matlab/Octave, but is a full fledged
programming language with many more capabilities and libraries. It is
Open Source and hence free to donwload and use.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
● In general programming is much easier under Linux, because that
is an operating system made for scientists, engineers, and
programmers, unlike Windows, which is made for office applications.
Hence we will use Linux, and only support Linux (you can use
Windows but then you are on your own).

● Linux is also Open Source, and can be freely downloaded and

used (unlike Windows, which is closed source and costs about 100
eur per copy!)
● It can be easily installed as a dual boot system on you Laptop or
PC, for instance by downloading the system from www.ubuntu.com
– Download -Overview. Download either “Desktop” for laptops or
desktop computers, or Ubuntu-Flavours – Ubuntu Mate for
Netbooks or the Raspberry Pi.
● Burn it to a USB stick or card, and then start the installation for
instance by restarting the PC, keep F2 or F12 or so constantly
pressed to get into the Boot menu, and then choose “start from
USB” or such. From there you can install Ubuntu as a dual boot.
Alternatively, you can also install Linux under “Virtual Box” on your PC
or Laptop, which is a virtual machine.
Here is a short installation guide:

-Install in Windows:
Install VirtualBox and VirtualBox-Extensions from virtualbox.org
Download .iso image from www.ubuntu.com or https://ubuntu-mate.org/download/ (for
lightweight laptops) to usb stick or the PC hard drive
-Start VirtualBox, Setup "New Machine" using the iso image. After finishing, remove the iso
image (if it is on the hard drive, rename it to avoid the installation to start again)
-Before starting the virtual machine in VirtualBox:
Set RAM and Number of CPU's high, in Settings-System-Processor
(http://askubuntu.com/questions/365615/how-do-i-enable-multiple-cores-in-my-virtual-
enviroment)
-After starting the virtual machine, install guest additions. Open a terminal Window, e.g.
with keyboard shortcut Strg-Alt-T. Then type:
sudo apt install virtualbox-guest-additions-iso
cd /media/schuller/VBOXADDITIONS...
sudo sh ./VBoxLinuxAdditions.run
(See: wiki.ubuntuusers.de/VirtualBox/Installation)
-Then restart the virtual machine.
Press (right)Strg-F for full screen mode
-Activate external Devices for the virtual machine:
USB: On top menu bar of the VirtualBox go to Devices-USB click for checkmark
-Webcam: on the VirtualBox menu bar go to Devices-Webcam, click for checkmark.
Vorlesung Multimediale Werkzeuge
Organisation/Gliederung

• Geschichte
• Übertragungstechnik
• Medienobjekte
• Audioobjekte, Formate
• Bildobjekte, Format
• Verlustlose und verlustbehaftete Kompression
• Teilbandzerlegung, Modifikation von Objekten
• Bildcodierung, Waveletzerlegung

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Multi-Media:

Mehrere Medien:
• Text
• Bilder
• Ton, Audio, Sprache (Medien im Sinne von "Multimedia„)
• 3-D Modelle
• Video
• Tastsinn: Taktiles Feedback...
• (Geruchssinn)
• (Geschmackssinn)

Werkzeuge: Übertragungstechnik:
• Erstellen, zusammen bringen • Internet/Fernsehen
• Präsentieren
• Transport (Netze, Internet)

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
Geschichte
Steinzeit? Höhlenmalerei, Stimme, Sprache,
Rauchzeichen, Trommeln, Musik (Flöten)

Biblische Zeiten mehre 1000 Jahre BC:

Schrift, Schreiben, Gesellschaftliche
Bücher, Briefe Bedürfnisse
→ Art von Telekommunikation
Römisches Reich: Wandzeitungen (erste Massenkommunikation)

Mittelalter: Erfindung des Buchdruckes ( Gutenberg,

v.a. Erfurt, Gutenbergbibel)
Massenkommunikation, günstige Bücher, zuhause
zu Lesen, mehr Information, Revolution der
Informationstechnik

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

Vorteil Lateinisches Alphabet: wenige Zeichen

Vergleich chinesisches Alphabet: mehrere 1000 Zeichen
Problem für Buchdruck!

!wichtig! Information wurde breiten Massen zugänglich

Telegraphen:
• Römisches Reich: Signalisierung mit Türmen und Fahnen
• Renaissance, Neuzeit: Elektrizität, Nutzung der Elektrizität zur
Telegrafie
• Gauss: Göttingen: zwischen Uni und Sternwarte
elektrische Leitungen, Batterie, Taster,
elektromagneten mit Kompass

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
Geschichte

→ Gesellschaft schafft sich ihre Kommunikationsmittel

Ca. 1700 (während und kurz nach 30 jährigem krieg)

Zeitungen: Massenmedium mit aktueller Information.
Bewegliche Buchstaben im Rahmen, so dass Texte
schnell gesetzt werden können.
wichtig: relativ wenige Buchstaben werden benötigt
(etwa 26 klein und Groß Buchstaben,+ extra Zeichen)
Buchstaben Rahmen

Schiene

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
Geschichte 2 Drähte Erste elektrische Inf. Übertragung
“Morse” Taster Kompass ist Empfänger
dreht sich bei Magnetfed,
wenn Taste geschlossen
Batterie

Spule

• einfacher Telegraf, ist schon digital (Strom ein/aus)

• Text-Übertragung (Techn. Museum München)

Telefon: Ende 1800. Ende 19 Jhdt., Phillip Reis, Graham Bell, analog →
erstes Telefone mit verständlicher Sprache

Radio: Elektromagnetische Wellen (Heinrich Hertz, in Berlin und

Karlsruhe) Fessenden, USA: Erste Übertragung von Stimme und
Musik drahtlos, 1926, New Jersey

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

Fernsehen: Erste Gedankenversuche im 19 Jhdt.:

Stromquelle

Glühbirne

Licht empfindlicher
Davon einige hundert bis einige
Widerstand,
tausende: Bildübertragung
Photozelle

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
Geschichte
Lichtquelle Drehung Löcher Photozelle Lichtquelle Drehung

eine Art von Dia Abtastung

Multiplexing Nipkow Scheibe

Problem: Wenige Zeilen, grobes Bild

Konzept: Zerlegung des Bildes in einzelne Punkte, die nacheinander
übertragen werden.
Trägheit des Auges nutzen → Einbeziehen des Empfängers

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

Beispiel einer Nipkow-Scheibe mit 8 Zeilen

(Aus: Wikipedia, Nipkow-Scheibe)

Beispiel eines Bildes, mittels

Nipkow-Scheibe übertragen,
mit vertikaler Zeilenstruktur
(Aus: Wikipedia, Nipkow-Scheibe)

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
Geschichte

Für bessere Auflösung:

Ersetzen der mechanischen Komponenten (Nipkow Scheibe) durch
elektronische Komponenten:
• Bildröhre in Sender und Empfänger.
• Elektronen sind weniger "träge"

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte - Digitale Übertragung

Digitale Netze, Computernetze, Internet

nicht nur Bilder,

Fax beliebige digitale
Medien
Bilder,
unbeweglich

Digitalisierung, Abtastung, Diskretisierung:

schon in analogen Fernsehen bei den Zeilen!
• Dann voll digitales TV als nächster Schritt
• Digitalisierung von Audio, Musik, Sprache
durch Abtastung und Quantisierung
FG Angewandte Mediensysteme | MMW
Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
 Vorlesung Multimediale Werkzeuge
Geschichte

Internet: Anfang in den 60ern, erste Entwicklungen in den 50ern

• Auftrag von DARPA (US Verteidigungsforschung) an Universitäten, für

ein robustes Datennetz.
• Verwendet wurde das entstehende Internet zwischen Universitäten und
auch der NSF ( National Science Foundation)
• Anwendungen: File- Übermittlung (FTP), email, Newsgroups
• Benötigt: Paketorientierte Datenübertragung
D.h. Daten werden zu Paketen zusammengefasst, mit einem
sog. Header versehen, der die Adressinformation enthält. Netz
leitet anhand der Adressinformation weiter.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

Paket Vermittlung:
entwickelt in 50ern und 60ern am MIT (USA), BBN (Cambridge,
Boston, USA)

Internet: Anfangs nur Unis und etwas Militär.

.edu (educational), .org (Organisation, z.B. NSF)

Europa, 80er Jahre: .de (Deutschland)

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

90er Jahre:
• Entwicklung des World Wide Web, entwickelt an CERN in der
Schweiz (Großforschungseinrichtung)
• Zweck: Erleichterung der Zusammenarbeit der verteilten Gruppen.
• Entwicklung der Protokolle http, html
• Erste verbreitete Browser: Mosaic (Andresen), ca. 94. Dann
Netscape.
• Vorher: Gopher (80ern), rückwärtskompatibel, bedienbar selbst mit
VT100 Terminals, also nur Keyboard und Text.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

Durchbruch fürs Internet:

• Graphische Benutzeroberfläche mit Maussteuerung (kein Keyboard

benötigt).
• Ca. 94: kommerzielle Nutzung des Internets zugelassen.
• Von da an: Exponentielles Wachstum des Internets, Webseiten von
Firmen, immer höhere Kapazitäten.
• Vorteil der Kommerziellen Nutzung: Netze orientieren sich an
Nachfrage, ISP investieren in Geschwindigkeit, Konkurenz drückt den
Preis.

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17
Vorlesung Multimediale Werkzeuge
Geschichte

Höhere Geschwindigkeit:
nicht nur Text, auch Ton, Bild, Video mit akzeptabler
Geschwindigkeit möglich. Wirklich "Multi-" Media.

Digitales Terrestrisches TV (DVB-T), HDTV

Digitales Radio HDTV wird

durch Digitalisierung
wesentlich erleichtert

Literatur:
Buch: Stephen Segaller, "Nerds 2.0.1, A Brief History of the Internet“,
TV Books, 1st , 1998

FG Angewandte Mediensysteme | MMW

Prof. Dr.-Ing. Gerald Schuller| Vorlesung 1 – 4/7/17