0

Ich bin gerade etwas sprachlos. Ich habe hier ~35GB JSON-Daten. Diese Daten sind das Ergebnis des crawlens einer öffentlich verfügbaren API alle fünf Minuten für ein Jahr. Die Antworten der API haben eine durchschnittliche Größe von ~330KB und unterschieden sich oft nur im Zeitstempel oder zusätzlich in kleineren Details. Das sind also durchaus viele redundante Daten. Initial habe ich jede Antwort mit gzip komprimiert und als einzelne Datei gespeichert. Im Vergleich zur unkomprimierten Größe hat das zwar nur 2GB Speicherplatz benötigt, aber ich war unglücklich mit der großen Anzahl an Dateien und wollte die Daten gerne noch etwas besser komprimiert haben, so dass ich sie jetzt zu einer einzelnen JSONL-Datei zusammengeführt und diese anschließend mit Zstandard (mit Kompressionstufe 19) komprimiert habe. Anschließend habe ich mir erst mal verwundert die Augen gerieben und meinen Fehler gesucht, denn das Ergebnis war nur noch 5,3MB groß. Megabyte, nicht Gigabyte! Aber offensichtlich hat das alles seine Richtigkeit: Dekomprimiere ich die 5,3MB große Datei, bekomme ich alle 35GB an JSONL-Daten wieder. Das nenne ich mal effiziente Kompression.

1

I discourage use of machine learning, because it’s really difficult. Unless you have to use machine learning, don’t do it. It’s usually a red flag when somebody is saying “We wanna use machine learning to solve this task”. I’m like: That sounds like bullshit. 99.9% of the time you don’t need it.
– Elon Musk

That’s a statement made by Elon Musk during past weeks “Tesla AI Day” when being asked if Tesla also uses machine learning for other applications than autonomous driving.

It sums up pretty nicely what I think about useful use cases for machine learning as well. I believe there is often a much more simpler and faster way to achieve a desired result. Machine learning done right is hard and requires a lot of knowledge, training data and compute capacity to get right. Otherwise you might end up with an unfit model whose output looks good, but actually isn’t, which might not be obvious as the reasons for decisions made by the model are too opaque.

0

Heute hat mir das jahrelange Rumgenerve mit Outlook.com und allen Domains die da noch so dazugehören (z.B. hotmail.de) gereicht: Es war praktisch nie möglich E-Mails an solche Adressen zu senden, weil Microsoft nur E-Mails von absendenden E-Mail-Anbietern zulässt, die auf einer Whitelist stehen. Und da kommt man entweder mit viel betteln oder gar nicht drauf. Jetzt ist Schluß damit. Ab jetzt wird jede eingehende E-Mail, die über Outlook.com kommt, mit dem Hinweis abgelehnt, dass der Sender auf seine E-Mail sowieso keine Antwort bekommen könnte und deshalb lieber einen anderen E-Mail-Anbieter zum Versand nutzen soll. Ich bin gespannt wie das ankommt.

0

Bis vor einer Weile war ich immer wieder erstaunt, wenn mir Bekannte davon erzählten, was sie wieder alles ausgemistet und weggegeben haben. Das ging hin bis zu eigenen Ständen auf Flohmärkten, um alte Sachen loszuwerden. Ich fragte mich dabei immer: Wie viel müssen die gekauft haben, um jetzt so viel loswerden zu wollen. Ich jedenfalls habe nicht so viele ungenutzte Sachen … dachte ich.

Dann las ich “Magic Cleaning” von Marie Kondo, was letztes Jahr dank einer Fernsehserie in aller Munde war. In “Magic Cleaning” geht es darum, wie man unnötige Dinge in seinem Leben identifiziert und los wird. Das Buch kann ich wärmstens empfehlen, denn auch wenn mir Marie Kondo’s Konsequenzen an einigen Stellen zu radikal sind, so öffnet dieses Buch doch den Blick dafür, welche Besitztümer man wirklich braucht und welche eigentlich mehr Last als Freude sind.

Seitdem krame ich immer mal wieder in Schubfächern und Kisten und finde regelmäßig Sachen, die ich nicht mehr brauche. Früher habe ich diese Sachen getreu dem Motto “das ist zu gut zum wegwerfen” aufgehoben, aber inzwischen trenne ich mich konsequent von ihnen. Dazu kam für mich die Erkenntnis, dass man über Ebay Kleinanzeigen für praktisch alles einen Abnehmer findet: Eine 15 Jahre alte, hoffnungslos veraltete DVB-T-PCI-Karte, mit der man heutzutage kein Fernsehen mehr gucken kann? Kein Problem. Benutzte Fahrradreifen? Finden ebenfalls einen Abnehmer.

Auch wenn der Aufwand, solche Sachen über Ebay Kleinanzeigen zu verkaufen, in keinem Verhältnis zu den Beträgen steht, die man dafür bekommt, so freut es mich doch jedes Mal, wenn jemand noch Verwendung für etwas hat, für das ich keine mehr habe. Und so bin ich fleißig dabei nach und nach alle möglichen Dinge loszuwerden und es fühlt sich gut an. Weniger Krams, weniger Ballast.

0

Ich werde regelmäßig beim Radfahren von Autofahrern angehupt, obwohl ich vollkommen regelkonform fahre. Solch ein Hupen kommt insbesondere dann vor, wenn Autofahrer mich aufgrund von Gegenverkehr nicht überholen können (dabei bin nicht mal ich derjenige mit dem breiten Fahrzeug 😉). Offensichtlich sind die Autofahrer der Meinung ich solle woanders als auf “ihrer” Straße fahren. Zum Beispiel auf einem neben der Straße gelegenen Radweg. Was die Autofahrer dabei übersehen ist, dass das keine benutzungspflichtigen Radwege sind und ich als Radfahrer daher das gleiche Recht wie sie habe die Straße zu benutzen.

Dass die genannten Radwege nicht benutzungspflichtig sind hat einen einfachen Grund: Sie entsprechen nicht den dafür nötigen Standards. Entsprechend sind sie für Radfahrer unbequem und teilweise sogar aufgrund geringer Abstände zu Fußgängern und parkenden Autos gefährlich zu befahren. Deshalb haben Radfahrer die Wahl, ob sie den Radweg oder die Straße benutzen wollen. Ich wähle dabei oft die Straße, da ab einer gewissen Geschwindigkeit schmale, kurvige Radwege mit unebenem Bodenbelag einfach nur hinderlich sind (aus ähnlichen Gründen ziehen Autofahrer ja auch meist Autobahnen kurvigen Landstraßen vor). Viele Autofahrer scheinen sich des Unterschiedes zwischen benutzungspflichtigen und nicht benutzungspflichtigen Radwegen nicht bewusst zu sein, was zu den besagten Reaktionen führt.

Hier in Hamburg werden seit einer Weile die Fahrbahnmarkierungen für Einmündungen von der Straße auf nicht benutzungspflichtige Radwege so gestaltet, dass eindeutig ersichtlich ist, dass Radfahrer die Wahl haben, ob sie auf den Radweg wechseln oder weiter auf der Straße fahren können. Das ist eine gute Sache, scheint aber den hupenden Autofahrern noch nicht aufgefallen zu sein.

Ich frage mich, wie man Autofahrern erklären kann, dass Straßen genauso für Radfahrer da sind. Die Gelegenheit mit einem hupenden Autofahrer kurze Zeit später entspannt sprechen zu können, hat man in solchen Situation ja doch eher selten. Für Ideen dazu bin ich dankbar.

0

Seit Anfang diesen Jahres leben meine Frau und ich dank Atmosfair komplett CO₂-neutral. Zwar war unser CO₂-Abdruck auch vorher schon vergleichsweise gut, da wir weder ein Auto, noch Kinder haben, schon immer Ökostrom beziehen und in einer überschaubar großen Wohnung leben, aber in den vergangenen Monaten war ich trotzdem immer wieder froh, dass wir diese Entscheidung getroffen haben.

Ich bin froh darüber, da ich erst in den letzten Monaten wirklich begriffen habe, wie schlimm es um unsere Erde wirklich steht. Die letzten Meldungen in einer Reihe von Hiobsbotschaften, neben neuen Temperaturrekordern im Juni und Hagelschauern in Mexiko berichten von unglaublich hohen Temperaturen in der Arktis, die jeden aufrütteln sollten: Bei bis zu 20°C schmilzt dort so viel Eis und Permafrostboden, wie Wissenschaftler erst in 70 Jahren erwartet haben. Trotzdem haben die meisten Politiker immer noch nicht begriffen, was auf dem Spiel steht. Machterhalt und Klientelpolitik sind offensichtlich wichtiger, als die langfristige Bewohnbarkeit der Erde sicherzustellen. Wir müssen auf die Straßen! Wieder und wieder, bis die Politik das Thema irgendwann nicht mehr ignorieren kann.

0

Heute vor einem Jahr starb der Musiker und DJ Avicii. Ebenfalls heute vor einem Jahr befand ich mich gerade in Lissabon, um mal für eine Weile dem deutschen Aprilwetter zu entfliehen und von dort aus zusammen mit ein paar Arbeitskollegen zu arbeiten. Beides sind für mich Ereignisse, die mein Leben seitdem geprägt haben.

Einfach mal spontan mit Arbeitskollegen für zwei Wochen ins Ausland zu gehen und dort auf engen Raum zusammen zu wohnen und zu arbeiten erforderte für mich meine Komfortzone weit mehr als einmal zu verlassen. Etwas, dass ich bis dato wenn möglich gerne vermied. Vor der Reise war ich mir auch alles andere als sicher, ob das denn eine gute Idee sei. Diese Befürchtungen waren allerdings vollkommen unbegründet und es war eine wunderschöne Zeit in Lissabon. Zusammen mit diversen Gespräche bei der einen oder anderen Flasche Bier und Wein brachte mich das dort dazu, zu überdenken mit welcher Einstellung ich an Entscheidungen heran gehe. Das Ergebnis davon: Das Leben ist zu kurz, um immer nur seinem täglichen Trott zu folgen, anstatt einfach mal Neues auszuprobieren. Ohne jemals Oktopus gegessen zu haben, kann man schließlich nicht wissen, ob einem das nicht schmeckt oder es das großartigste Essen überhaupt ist. Und wenn’s nicht schmeckt, war’s zumindest den Versuch wert.

Aviciis Musik passt wunderbar zu dieser Einstellung einfach mal Sachen zu machen und sein Leben zu leben. Vielleicht inspiriert das ja auch den einen oder anderen Leser:

0

Ich muss an dieser Stelle schlechtem Webdesign danken und zwar dafür, dass ich dadurch genau weiß, welche Seiten sich nicht zu lesen lohnen, weil dort nicht Wert auf den Inhalt, sondern auf Details gelegt wird, die Besuchern die Nutzung erschweren.

So zum Beispiel bei Webseiten die der Meinung sind, besser als ihre Besucher zu wissen, wie diese gerne scrollen und die deshalb das Scrollverhalten des Webbrowsers durch ein eigenes ersetzen. Oder auch Seiten, die der Meinung sind, hellgraue Schrift auf weißem Hintergrund sähe voll super aus.

Neu dazu gekommen sind dieses Jahr all jene Seiten, die, um der DSGVO zu genügen, Banner zum akzeptieren der Verarbeitung personenbezogener Daten anzeigen, ohne eine einfache Möglichkeit anzubieten die Seite nutzen zu können, ohne der Datenverarbeitung zuzustimmen (was laut DSGVO übrigens möglich sein muss).

0

Ich habe heute einen Apfelkrapfen und einen Mohnstriezel von Dat Backhus gegessen. Weder hat der Apfelkrapfen nach Apfel, noch der Mohnstriezel nach Mohn geschmeckt. Ich sollte so was gar nicht erst probieren, sondern lieber einfach beim selbst backen bleiben. 😬