Reinforcement Learning – The mountain car game, Part 2

I did some experiments with this small example game. My goal was to find effective AI settings; settings that would always lead to quick success. Last time, the AI did manage to beat the game after ~180 attempts – these settings were the starting point of a long testing session.

In this blog, I will go over the results of the experiments.

Reinforcement Learning – The mountain car game, Part 1

I followed a TensorFlow tutorial that puts the paradigms mentioned some blogs prior (Q-Learning, epsilon-greedy policies) to practice. I implemented an AI that learns to play the ‚mountain car game‘, which is about getting a small car onto the peak of a mountain. This is done by swinging left and right, gaining momentum and using that to win. To increase the difficulty a bit, there is a time constraint of three seconds.

This blog is about the setup and the inital results.

Auditive Wahrnehmung

Abb 1. https://de.wikipedia.org/wiki/Dualismus#/media/File:FlammarionWoodcut.jpg

Auditive Wahrnehmung: Körper – Geist – Medien

Bei der weiteren Beschäftigung mit ‚interactive sound installation’ ist es angebracht und notwendig über die zwei viel diskutierten Ideale, Subjektivität und Objektivität ein Verhältnis bzw. eine Unterscheidung zu treffen. Es folgt eine kritische Betrachtung der menschlichen Wahrnehmung.

Bilder interpretieren – Ja. Aber wie?

Bei der Beschäftigung und Untersuchung mit Fotos auf Social Media-Kanälen stellt sich bei der Bandbreite an Material die Frage wie dieses in Bezug auf Analyse, Interpretation und Auswertung behandelt werden soll. Klassische Bildinterpretationen wenden mehrstufige Systeme an, um verschiedene Aspekte des Bildes v. a. im Kontext mit Raum und Zeit und der Interpretation der dargestellten Artefakte zu beleuchten. Ein Beispiel dafür ist Erwin Panofsky, der eine Analyse nach hermeneutische Vorbild wie die Interpretationsmethode der Ikonologie, vollzieht.

Panofsky geht es in seinem Ansatz darum:  „… die chaotische Vielfalt menschlicher Zeugnisse in etwas zu überführen, das man Kulturkosmos nennen könnte.“ (Panofsky: Kunstgeschichte, S. 11). Bei diesem Versuch wird eine Ordnung hergestellt und jedes einzelne Bildelemente fokussiert und besprochen. Das Ordnen des Kosmos in den Geisteswissenschaften ähnelt dem Verfahren in den Naturwissenschaften und erfolgt in insgesamt drei Schritten:
1. Beobachtung und Prüfung
2. Dechiffrierung und Interpretation
3. Klassifikation

Diese drei Schritte lassen sich wiederum genauer untergliedern:

Nach Panofsky sind  wesentliche Aspekte eines Werkes Idee, Form und Gehalt. Während die ersten beiden durch formale und topologische Analyse erschließbar sind, ist entzieht sich der Gehalt, vor allem im Wandel von Zeit,  Kontext und Trend ein fixen Wertungskritik (v. a. im Bezug auf Bildern im Social Media-Kontext).  „Der Gehalt eines Werkes, so Panofsky ist die „Grundhaltung einer Nation, einer Epoche, einer Klasse, einer religiösen oder philosophischen Überzeugung […] in einem einzigen Werk verdichtet.“ (Jo Reichertz). Diese Art der Analyse ist vor allem bei bedeutenden Bildern mit historischem Gewicht interessant und erstrebenswert, da das Herauskristalisieren des „Gehalts“ vielschichtig und im Kontext mit der Traditionsgeschichte von abgebildeten Gegenständen vielseitig interpretiert werden kann (siehe Kniefall von Willy Brandt).

Allerdings lässt sich die aktuelle Bilderflut auf Instagram mit einer solchen Herangehensweise kaum bändigen. Die Fotos sind oft trivial und aufgrund ihrer starken Wiederholung ist die Frage nach dem „Gehalt“ eine andere als in der klassischen Bildinterpretation von bspw. historischen Momenten.

Eine anschaulichere und vergleichendere – design-lastigere – Analyse ist gerade im Experiment-Teil  wünschenswert.

Reinforcement Learning – Starting to getting started

So far in this project no programming was needed. For the next step, which is to take a closer look on TensorFlow, a simple Notepad will not be sufficient. That is why this blog is about one of the first thing to do when it comes down to the development: choosing the right Integrated Development Environment (aka IDE), installing the best choice and getting TensorFlow running.

To be precise, this blog is about possible IDE options and  what to keep in mind when installing TensorFlow.

Reinforcement Learning – Advanced practices

Last week I gave a quick introduction to Q learning. This week I want to follow up to this topic by taking a closer look on more advanced development practices than those used in MarI/O.

This blog covers three useful practices in the field of reinforcement learning. The sources mentioned at the end provide code examples that will be useful for future experiments.

Wo kommt eigentlich dieser Feminismus her? – Teil 3: Die dritte Welle und Aktuelles

Bevor die dritte feministische Welle in Deutschland entstanden ist, sind lokal und global Initiativen ins Leben gerufen worden, wie etwa die Weltfrauenkonferenzen der Vereinten Nationen, die zur Vernetzung dienen sollen. Zum Auslöser für die neue Welle wurde die Riot-Grrrl-Bewegung, die in den 1990ern in den USA entstanden war. Dies war eine feministische Bewegung in der Punk-Szene, bei der versucht wurde auf die männliche Dominanz in der Musikszene zu reagieren. Einige der Elemente wurden auch in Deutschland aufgegriffen.