open-source on Leander's Blog

Wenn du Websiten für Datei-Umwandlungen verwendest, bist du cringe 😞

Sat, 11 Mar 2023 10:48:45 +0100

Wir alle kennen es: Man möchte sein Ausweisfoto in letzter Sekunde hochladen:

Sorry, dieses Dateiformat ist nicht unterstützt, verwende bitte JPEG!

Schnell *JPEG-Converter* gegooglt und man landet auf einer von tausend schrecklichen, mit Werbung und Tracking verseuchten Websiten, die Ihren Job teilweise gar nicht erfüllen.

Schluss damit. Hier ein Guide, wie es richtig geht.

Digitaler Analphabetismus bzw. Medienkompetenz

Wir sind von Technik 24/7 umgeben, der Großteil der Bevölkerung hat aber keine Ahnung davon, wie man richtig damit umgeht. Wie wir heute mit Handys und Computern umgehen ist so, als würden wir ständig ein Buch in der Hand halten, ohne Lesen und Schreiben zu können.

Wobei teilweise kann die breite Masse dann durchaus “Lesen”, nur ist es genau vordefiniert, was und wie gelesen wird - wirkliche Freiheit dabei hat man also nicht.

Websiten die hungrig nach Profit und/oder Daten sind, nützen diese fehlende Bildung schamlos aus. Man will sich gar nicht ausmalen, wieviele vertrauliche Dokumente, private Fotos und Ausweiskopien auf irgendeinem zwielichtigen Server liegen, nur weil Menschen keine Ahnung haben, wie man ein fucking PDF aus Bildern erstellt 😔

Dieser Guide soll dir helfen, endlich digital frei zu sein.

Damit meine ich, die Abhängigkeit von zwielichtigen, closed-source und proprietären Anbietern so klein wie möglich zu halten.

Have fun 😄

Mach erstmal die Basics 📈

Lies dir bevor du hier weitermachst bitte diesen Artikel durch

Wir erinnern uns, dass unser Computer einfach nur eine Verschachtelung von Ordnern ist. Weiters solltest du wissen, dass das Terminal ein netter Ort ist, vor dem man sich nicht fürchten muss, sondern mit dem Computer sehr direkt interagieren kann.

Um Bilder umzuwandeln, brauchen wir nun ein externe Library, diese Laden wir mit brew runter.

brew install imagemagick

Für Windows gibt es einen Binary install hier.

Nach Installation funktionieren alle folgenden Schritte auch offline

Let’s go (to the Terminal)

Navigiere zuerst in den Ordner mit den gewünschten Dateien, beispielsweise so (auf Windows dir statt cd):

cd ~/Desktop
cd ~/Documents
cd ~/Downloads

Angenommen wir haben in dem Ordner Handyfotos von unserem Studienausweis:

usi_kurs
├── ausweis_front.HEIC (Apple-Format)
└── ausweis_back.HEIC

High Efficiency Image Coding (HEIC) ist ein Dateiformat, das vor allem beim Bilder knippsen mit dem iPhone verwendet wird. Da das Format noch relativ neu ist, wird es von vielen Websiten¹ noch nicht unterstützt.

Also müssen wir das Ding konvertieren 🦾

Glücklicherweise geht das mit imagemagick sehr sehr einfach:

magick ausweis_front.HEIC ausweis_front.jpg
magick ausweis_back.HEIC ausweis_back.jpg

In unserem Ordner finden wir dann die Original-Dateien unverändert und die entsprechenden Ziel-Dateien

usi_kurs
├── ausweis_front.HEIC
├── ausweis_back.HEIC
├── ausweis_front.jpg
└── ausweis_back.jpg

Cool, aber wie füge ich die jetzt zusammen zu einem jpg?

Oft erlauben Websites nur eine einzige Datei, was natürlich bei Ausweisfotos blöd ist, weil das Ding eine Vorder- und Rückseite hat.

Auch hier haben die Legenden von imagemagick an alles gedacht:

magick ausweis_front.HEIC ausweis_back.HEIC -append einFile.jpg

Cool: Man kann Umwandlung und Aneinanderhängen auf einmal machen 😲

Wenn man direkt ein PDF mit seinem Ausweis haben möchte, einfach das Output-Format ändern:

magick ausweis_front.HEIC ausweis_back.HEIC -append meinPDF.pdf

Fazit: Open-Source ist super 😄

P.S. Das Titelbild habe ich mit Hilfe von Stable Diffusion erstellt 🤖❤️

*hust* usi ↩︎

Uni Hacks - Work smarter not harder 🧠

Thu, 19 Jan 2023 19:41:59 +0100

Studieren beginnt mit Organisation.

Wenn man ein wenig Ahnung von Computern hat, dann kann man sich während dem Studium sehr viel Zeit und Nerven sparen.

Die Tools die ich hier vorstelle, sollten alle auf UNIX-Systemen funktionieren (also sowohl MacOS als auch Linux), mit Windows habe ich nicht viel zu tun, aber es sollte auch dort funktionieren. Falls nicht: einfach nach «Befehl» on Windows im Internet suchen.

zum Beispiel: ls -tr on Windows

Inhalt:

Grundlegendes

Bevor du PDFs manipulieren willst, solltest du dich ein wenig mit der Abreitsweise und Logik deines Computers vertraut machen.

Mit einem Computer via Kommandozeile interagieren 👀

DISCLAIMER - Diese Befehle sind UNIX-eigen

Terminal finden

Zuerst müssen wir die Kommandozeile finden 🔎 Am besten suchst du dafür mit Spotlight ⌘ + Leertaste

Dann suchst du nach “Terminal” und hittest ENTER ↵

Geschafft!

Befehle: cd - ls - man (basic)

cd: change directory

Du kannst dir einen Computer als eine Verschachtelung von Ordnern vorstellen, ca. so:

home
├── Desktop
│   └── uni
│       └── ausarbeitung.pdf
├── Documents
│   └── aufgabe1.pdf
└── Downloads
    └── exmatrikulation_muster.pdf

Normalerweise kannst du einfach in einen Ordner reingehen, in dem du darauf doppelklickst. Das Terminal-Äquvivalent dazu is **cd**

Du befindest dich standardmäßig in /Users/<deinUser>/ wenn du das Terminal startest.

Das kannst du auch überprüfen in dem du einfach pwd (path 2 working directory) in dein Terminal mal eingibst.

Jetzt sind wir also in der Ebene des Users - nice. Aber eigentlich wollen wir oft in den Desktop bzw. Documents Ordner, weil dort die interessanten Files sind.

Dorthin komm man ganz einfach mit:

cd Desktop

Es gibt im Terminal eine Auto-Vervollständigung: zB sollte bei **cd Deskto ⇥ Tab-Taste** zu **cd Desktop** vervollständigen.

Wenn du wieder in die Ebene über dem Desktop (also in meinem Fall wieder zu home) möchtest, schreib einfach:

cd ..

Wenn du gleich auf einmal in eine tiefer-gelegene Directory (richtiger Ausdruck für Ordner) gehen möchtest:

cd Desktop/uni

Der / ist hier essentiell!

ACHTUNG: Zurück zur ursprünglichen Ebene nicht mit “..”

Wenn du beispielsweise mit einem cd-Befehl tief hineingehst, z.B bei mir mit
cd Desktop/uni
und dann wieder auf deine ursprüngliche Position zurück möchest (bei mir home) wirst du mit
cd ..
nur auf die *Desktop*, nicht auf die *home*-Ebene zurückkommen. Um wieder zu deiner Startposition zurück zu kommen, schreibe:
cd -

#### ls: list

Jetzt wissen wir, wie man mit cd sich durch seine ganzen Computer bewegen kann. Jetzt wissen wir aber nicht unbedingt, was in diesen Directories drinnen ist.

Um das zu sehen, verwendet man den Befehl ls (ls steht für list)

Hier nochmal eine Beispiel Ordnerstruktur:

home
└── Desktop
    └── uni
        └── aufgabe1
            ├── ausarbeitung.pdf
            ├── ausarbeitung1.pdf
            ├── ausarbeitung1_final.pdf
            └── ausarbeitung1_final_v2.pdf

Jetzt gehen wir mal in aufgabe1:

cd Desktop/uni/aufgabe1

Um uns jetzt den Inhalt anzeigen zu lassen:

ls
#Ausgabe im Terminal (nicht unbedingt untereinander):
ausarbeitung.pdf
ausarbeitung1.pdf
ausarbeitung1_final.pdf
ausarbeitung1_final_v2.pdf

Man kann mithilfe von flags 🏳️ sehr viel an der Ausgabe ändern, z.B die Art der Sortierung der Ausgabe. Welche flags es so gibt, erfährst du mit dem nächsten Befehl.

man: Pre-Google-Ära 😲

Als cd, ls und viele weitere Befehle entwickelt und geschrieben wurde, gab es noch keine Tutorials wie dieses hier, wie man sie verwenden kann bzw. was sie überhaupt machen. Die Developer haben deswegen sogenannte man-pages verfasst (manuals)

man ls

Das Ergebnis schaut dann ungefähr so aus:

Um diese man-page

zu verlassen drücke q
nach oben zu navigieren k
nach unten mit j

Du kannst auch lustig sein und das manual von man selbst aufrufen - es geht!

man cd geht allerdings nicht, das hat einen technischen Grund

help cd ist hierfür zu wählen

Befehle: mkdir - mv - rm (intermediate)

Jetzt kommen wir zu mächtigeren, aber auch “gefährlicheren” Befehlen.

mkdir: make directory 📁

mkdir steht für make directory - es erstellt uns also einen Ordner!

mkdir meinOrdner

mv: move!

mv steht für move - damit können files oder auch ganze ordner verschoben werden.

Verschieben heißt auch umbennen - schauen wir uns das mal. Struktur:

home
└── Desktop
    └── uni
        └── aufgabe1
            ├── ausarbeitung.pdf
            ├── ausarbeitung1.pdf
            ├── ausarbeitung1_final.pdf
            └── ausarbeitung1_final_v2.pdf

pwd
/Users/<DeinUser>/

Jetzt wollen wir die letzte Version der Ausarbeitung aus dem Uni-Ordner raus auf den Desktop ziehen und gleichzeitig umbennen.

mv Desktop/uni/aufgabe1/ausarbeitung_final_v2.pdf Desktop/sendToProf.pdf

Das Ergebnis in unserer File-Structure

home
└── Desktop
    └── sendToProf.pdf
    └── uni
        └── aufgabe1
            ├── ausarbeitung.pdf
            ├── ausarbeitung1.pdf
            └── ausarbeitung1_final.pdf

ACHTUNG: wenn du zB test.pdf schon in deinem Ziel Ordner hast, und du mv-st ein anderes test.pdf dorthin, dann wird das ursprüngliche File überschrieben!

rm: remove

rm steht für remove - damit löscht man files

*rm* sorgt dafür, dass die Dateien **wirklich gelöscht** sind - du wirst sie nicht im Papierkorb finden - sie sind weg!

um ganze Ordner zu löschen, musst du die Flag -r setzen.

rm file.pdf #löscht file
rm -r directory #löscht Ordner samt Inhalt

Befehle: curl and brew

curl: lets go to the internet 🌐

curl kann alles, was dein Browser auch kann: du kannst auf Webseiten zugreifen, Dinge downloaden etc.

brew: der einzige (nicht beste!) package manager für mac 🍺

Die Standard-Befehle auf MacOS sind zwar ganz nett, aber oft möchte man mehr Funktionalität. Es gibt viele externe Programme, die genau das tun, was du möchtest bzw. brauchst. Um diese runterzuladen brauchst du einen sogenannten package-manager (Eine Art AppStore für IT-Menschen).

brew ist einer der sehr bekannten, leider nicht allzu schnellen. Mit brew kannst du alle weiter unten angegebenen programme installieren.

Wie du brew installierst, kannst du am besten auf ihrer Homepage nachlesen.

Die Kommandozeile effektiv verwenden

Nachdem du die oberen Befehle verinnerlicht hast, nun zu interessanten, mächtigeren Befehlen

find

Macht was es soll, es findet Dinge.

Dieser Befehl listet alle PDFs in dem Ordner Desktop auf (nicht aber in darunter liegenden Ordnern):

find Desktop -iname '*.pdf' -maxdepth 1

Jetzt möchten wir alle PDFs die sich maximal 3 Ebenen unter Desktop befinden anzeigen:

find Desktop -iname '*.pdf' -maxdepth 3

Der Stern ist ein Placeholder, d.h es kann alles vor .pdf stehen. Wenn zB direkt davor eine Zahl stehen sollte:

[0-9].pdf

Diese Placeholder sind äußerst mächtig. Wenn du mehr darüber lesen möchtest, suche im Internet nach regex.

oder ließ offline nach:

man re_format

grep«»

grep ist so etwas wie find, nur für den Inhalt von Plain Text Dateien.

Ich wollte hier nur darauf hinweisen, dass grep existiert.

grep ist nicht Inhalt dieses Tutorials.

mv mit mehr Funktionalität

mv - einer der häufigsten Befehle, die ich verwende. Vor allem wenn ich nur eine bestimmte Art von Datei (und davon sehr viele) in einen Ordner verfrachten möchte.

Wanna move all the JPEGs to a specific directory (myFolder)? Easy:

mv *.jpeg myFolder

Die selbe Syntax funktioniert auch mit rm, bitte beachte dabei nur den obigen Hinweis.

PDFs

Wer lernt, hat viel mit Dokumenten zu tun. PDFs sind dafür das Standard-Format.

Oft möchte man aus PDFs einzelne Seiten extrahieren, mehrere PDFs zu einem zusammenfügen etc.

Hierfür gibt es einige Tools:

Tools

pdfjam (im texlive paket enthalten)
qpdf
ghostscript

Diese kann man alle mittels brew installieren:

brew install qpdf
brew install ghostscript
brew install texlive

Bilder zu PDF

Jeder kennt es: Altfragen, Fotos von Slides oder auch einfach Fotos von handgeschriebenen Mitschriften werden in Uni-WhatsApp-Gruppen herumgeschickt als gäbe es kein morgen. Spätestens in der Prüfungsphase kann man da schon mal den Überblick verlieren.

Die Lösung:

Die ganzen Bilder zu einem PDF zusammenfügen! 📈📈📈

Standardmäßig sollte convert schon auf deiner Maschine installiert sein, überprüfen kannst du das, indem du convert in dein terminal eingibst.

Wenn command not found zurückkommt, musst du vorher noch das Paket dafür installieren:

brew install imagemagick

Für Windows gibt es einen Binary install hier

How it’s done

Angenommen, wir haben folgende Ordnerstruktur:

altfragen
├── 01.jpg
├── 02.jpg
├── 03.jpg
├── 04.jpg
├── 05.jpg
├── 06.jpg
├── 07.jpg
├── 08.jpg
├── 09.jpg
├── 10.jpg
├── 11.jpg
├── 12.jpg
├── 13.jpg
└── otherFile.pdf

Wir wollen also alle jpg zu einem altfragen.pdf zusammenfügen:

convert *.jpg altfragen.pdf

Good-2-Know: Die original jpg-Files bleiben erhalten!

convert ist ein ziemlich mächtiger Befehl. Man kann damit auch Dateiformate konvertieren.

Mehrere PDFs zu einem PDF zusammenfügen

Hierfür benötigen wir ghostscript aka gs. Weiter oben findest du den Installationsbefehl.

Jetzt haben wir beispielsweise zwei PDFs in unserem Ordner, die wir miteinander mergen wollen:

altfragen
├── stupidPhoto.jpg
├── altfragen.pdf
└── otherFile.pdf

Dabei soll otherFile vor den altfragen stehen und das ganze in out.pdf gespeichert werden. Der Befehl:

How it’s done

gs -dNOPAUSE -dBATCH -sDEVICE=pdfwrite -sOutputFile=out.pdf otherFile.pdf altfragen.pdf

Du kannst selbstverständlich auch mit *.pdf hier arbeiten, allerdings ist die Sortierung standardmäßig alphabetisch.

Aus einem PDF einzelne Seiten exportieren

Kann man mit der Preview (dt. Vorschau) machen, aber wir verwenden jetzt pdfjam.

Installationsanleitung siehe oben.

How it’s done

Angenommen wir haben ein PDF namens langesPDF.pdf mit 10 Seiten und wollen nur Seite 3, 5 und 7,8,9,10 in clean.pdf abspeichern:

pdfjam langespdf.pdf 3,5,7-10 -o clean.pdf

Mehrere Seiten auf einer Seite drucken

Ein Life-Saver wenn man eine Open-Book Prüfung hat und Papier, Druckerfarbe, Zeit und Geld sparen möchte:

Mehrere Vorlesungs-Slides auf eine Seite zusammenfassen, zB immer vier Folien auf eine Seite

Auch dafür kann man wieder pdfjam verwenden.

Angenommen du möchtest von slides.pdf die Folien sowie in der oberen Abbildung in savePaper.pdf zusammenfassen:

pdfjam --nup 2x2 slides.pdf --landscape --a4paper --outfile savePaper.pdf

Fazit und Ausblicke

Ich hoffe, dir hat irgendwas in diesem Artikel geholfen. Ein Teil zwei ist derzeit geplant, nämlich:

Bilder und PDFs durchsuchbar machen (ft. Tesseract)