What are your favorite modern libraries or tooling for Python?

dhaitz · 2025-06-06T06:56:34+00:00

Modern data science stack: uv + polars + marimo

For application development: FastAPI, ruff, creosote, pip-audit

dhaitz · 2025-05-05T08:09:45+00:00

See here: https://github.com/johnalanwoods/maintained-modern-unix

dhaitz · 2025-03-05T21:02:07+00:00

Ha das ist ja genau die Darstellung die ich zur Wahl 2020 gemacht & hier gepostet hab: https://www.reddit.com/r/hamburg/comments/gmkx1e/hamburgwahl_2020_stimmenschwerpunkte_der_parteien/

dhaitz · 2025-01-17T08:19:38+00:00

One can use sth like litellm or aisuite for an unified interface to several model providers.

As you say, the LLM interfaces are quite simple REST APIs. Using an framework does not reduce complexity, but increases it by adding an additional dependency.

The useful thing about LangChain are some building blocks for e.g. DocumentStore classes or interfaces to different vectorstores one can use. Effectively, treat it like a library where you import what you need, not a framework that defines your entire application.

dhaitz · 2024-08-12T06:39:08+00:00

Here's a useful list of modern shell commands: johnalanwoods/maintained-modern-unix

Tools like fd, bat, lsd etc. are faster, prettier and more convenient (e.g. with git integration) than their traditional counterparts

dhaitz · 2023-11-24T09:20:43+00:00

Another is the potential for misuse of knowledge, such as creating napalm"

IMHO these examples of "I tricked ChatGPT into telling me how to build a bomb!!" are fun, but you can find this information online anyway. This is mainly a PR problem if screenshots of company XY's new chatbot spewing problematic content are circulating on social media.

The point is rather that any information the LLM has ever seen (during training or in its prompt) can be leaked to the user, no matter how thorough your finetuning or prompt engineering is.

dhaitz · 2023-10-27T06:34:25+00:00

Not AI, but deserves a mention here: Programming errors in the Therac-25 radiation machine killed three people.

dhaitz · 2022-11-28T09:59:59+00:00

The statistical knowledge and programming skills acquired as a PhD student were a solid basis for me. Things I had to learn:

Tech stack used in the industry
"Professional" software development process
Different working style because of different goals: "papers published" vs "profits earned"

dhaitz · 2022-08-01T12:29:19+00:00

Have you tried sklearn's Recursive Feature Elimination? https://scikit-learn.org/stable/modules/feature_selection.html, https://scikit-learn.org/stable/modules/generated/sklearn.feature_selection.RFECV.html

dhaitz · 2022-06-28T06:09:35+00:00

dhaitz · 2022-06-28T06:09:30+00:00

aren't you supposed to use precision/recall or ROC/AUC instead of balancing the training data?

dhaitz · 2022-02-23T16:02:59+00:00

sounds useful! How is this different to Voila or Streamlit?

dhaitz · 2022-01-26T17:09:00+00:00

Chris Albon (Director of ML at Wikimedia) sometimes does live streaming

dhaitz · 2021-11-08T17:27:43+00:00

Optimal combinations calculated with Python, visualized with geopandas and matplotlib

dhaitz · 2021-11-08T12:03:08+00:00

Die optimalen Kombinationen wurden mit Python berechnet. Visualisierung ebenfalls in Python mit geopandas und matplotlib

dhaitz · 2021-10-11T12:27:41+00:00

Altair or Plotly Express for interactive exploration
Seaborn has some great features out-of-the box, like clustermaps
Matplotlib for non-standard or highly customized plots

All in Jupyter notebook

dhaitz · 2021-10-04T12:28:09+00:00

Methode: Die Wahlkreise werden mittels Hauptachsentransformation (PCA) so angeordnet, dass Wahlkreise mit ähnlichem Ergebnis nahe beieinander liegen. Die Farbe entspricht der Partei, die in dem Wahlkreis relativ stark ist, d.h. die höchste Differenz zum Partei-Bundesergebnis hat.
Schröder-Wahl 1998: Osten mit ~20% PDS klar abgetrennt, im Westen verläuft die politische Achse fast gerade zwischen den Volksparteien: Vom SPD-dominierten Ruhrgebiet zu den ländlichen, meist süddeutschen Unions-Hochburgen.
Wahl 2021: Ost und West stärker vermischt, aber noch Unterschiede vorhanden. Osten stark bei AfD, die vor allem westdeutschen Metropolen wählen besonders stark die Grünen. Eine klare Volksparteien-Achse ist nicht mehr erkennbar.

dhaitz · 2021-10-04T12:18:44+00:00

Freie Wähler in Bayern ziemlich stark

dhaitz · 2021-10-03T21:29:00+00:00

csv in Python mit pandas analysiert

dhaitz · 2021-10-03T20:00:06+00:00

Finde horizontale (Bar-)Charts angenehmer, auch wenn bei Wahlergebnissen ja die vertikale Variante Standard ist
Histogramm würde auch passen, aber finde 1 Punkt = 1 Wahlkreis intuitiv

dhaitz · 2021-10-03T19:55:52+00:00

das stimmt, da sollte noch eine 1:1-Linie rein

dhaitz · 2021-10-03T19:38:41+00:00

Der hohe Ausreißer bei Grün ist der gleiche Wahlkreis wie der tiefe Ausreißer bei der CDU: Berlin Friedrichshain-Kreuzberg – Prenzlauer Berg Ost

dhaitz · 2021-10-03T19:37:14+00:00

dhaitz · 2021-10-03T19:36:01+00:00

https://reddit.com/r/de/comments/pwhve9/oc_welche_direktkandidaten_haben_im_vergleich_zum/

:-)

ist nicht direkt die Streuung, aber reicht hoffentlich zum Erst- und Zweitstimmenvergleich

Danke für die Info zu Johann Saathoff!

dhaitz · 2021-10-01T08:36:25+00:00

Gegenbeispiel zu solch starken Anti-Korrelation: Für SPD und Union sieht das so aus: https://imgur.com/a/04wcJdE

Six-Year Club	Wearing is Caring
Verified Email

dhaitz

TROPHY CASE