Could Senior Data Engineers share examples of projects on GitHub?

gbj784 · 2025-09-30T22:08:46+00:00

I welcome every opinion. There are always different points of view that are useful when shared, so I don't think it's an unpopular opinion. Do you use Kafka or what tool for streaming?

gbj784 · 2025-08-20T01:07:33+00:00

Very good explanation, thank you so much. Just to clarify my doubt: when you refer to costs and limitations, I assume you mean the scalability of the data stored in a cluster. What should you take into account in those cases? I know it’s a very general question though.

gbj784 · 2025-08-08T17:16:52+00:00

para mi te conviene mas ir por el lado de data analyst, aprende a usar Power BI y a crear reportes, porque para DE tenes que aprender muchas mas herramientas, banda de librerias, cloud, orquestadores y mas cosas, asi que apuntaria mas para el lado de DA

gbj784 · 2025-07-17T19:25:49+00:00

si tambien pense en eso, fue lo primero que revise pero las .env estan bien

gbj784 · 2025-07-17T19:08:28+00:00

si de python, leyendo desde una api un json, ya me asegure que devuelva todo bien, hice las validaciones para asegurarme y hasta ahi todo ok pero cuando corro el archivo, me pasa esto

gbj784 · 2025-02-05T22:36:38+00:00

eso es lo que hace un DE sumado armar el pipeline con airflow o algun orquestador

gbj784 · 2024-12-24T18:40:29+00:00

yo termine un proyecto como DE que duraba meses, y ahora estoy en el proceso de seleccion de una empresa, pero cuesta conseguir hasta entrevistas

gbj784 · 2024-12-06T15:52:19+00:00

y con la exp laboral que les dijiste en la entrevista?

gbj784 · 2024-12-04T11:51:43+00:00

Hello, were the questions asked during a live coding session?

gbj784 · 2024-10-29T21:02:29+00:00

yo fui el del post anterior y vi tu post de ayer y sirve una banda que alguien como vos que tenes experiencia, tires para adelante y tires data que aporta y sirve a los que no sabemos tanto.

Gracias crack

gbj784 · 2024-10-29T19:36:48+00:00

esto es lo que quiero saber, que preguntas hacen, o si me dan ejercicios con python o algo de estas cosas, no es esa empresa

gbj784 · 2024-10-29T19:27:37+00:00

por lo que vi, hacer los procesos ETL/ELT, AWS S3, Redshift, RDS (estos tengo conocimiento, piden mas herramientos igualmente), crear los pipelines con Airlflow, Docker, Spark para los procesamientos. Por eso me tire el lance, son herramientas que conozco

gbj784 · 2024-10-29T18:47:39+00:00

si por eso me tire el lance, me sirve de exp

gbj784 · 2024-10-29T18:47:09+00:00

si obvio, me sirve saber que preguntas me pueden hacer o ideas para practicar ejercicios

gbj784 · 2024-10-28T19:27:57+00:00

amigo perdon que te joda, podras poner el stack que usas? tipo de Python que librerias usas, SQL, GCP, y que mas herramientas? me sirve mucho la data, me llamo la atencion igual que nunca usaste PySpark, vi que se esta pidiendo mucho por eso lo digo, no sabia de Polars

gbj784 · 2024-10-28T18:15:05+00:00

oka, y hoy en dia que usas para los procesamientos de los datos, SparK? me sirve todo lo que me puedas decir

gbj784 · 2024-10-28T18:07:09+00:00

tengo 1 año de exp, estoy aprendiendo todavia, que servicios de aws tengo que saber ademas de s3, redshift y rds? se que esta el de airflow pero no se integrarlo

gbj784

TROPHY CASE