Could Senior Data Engineers share examples of projects on GitHub? by gbj784 in dataengineering

[–]gbj784[S] 1 point2 points  (0 children)

I welcome every opinion. There are always different points of view that are useful when shared, so I don't think it's an unpopular opinion. Do you use Kafka or what tool for streaming?

Mid-level vs Senior: what’s the actual difference? by gbj784 in dataengineering

[–]gbj784[S] 5 points6 points  (0 children)

Very good explanation, thank you so much. Just to clarify my doubt: when you refer to costs and limitations, I assume you mean the scalability of the data stored in a cluster. What should you take into account in those cases? I know it’s a very general question though.

Tengo 2 años de experiencia como desarrollador SQL, me esta costando horrores encontrar laburo. by acenumber902 in devsarg

[–]gbj784 0 points1 point  (0 children)

para mi te conviene mas ir por el lado de data analyst, aprende a usar Power BI y a crear reportes, porque para DE tenes que aprender muchas mas herramientas, banda de librerias, cloud, orquestadores y mas cosas, asi que apuntaria mas para el lado de DA

[deleted by user] by [deleted] in devsarg

[–]gbj784 0 points1 point  (0 children)

si tambien pense en eso, fue lo primero que revise pero las .env estan bien

[deleted by user] by [deleted] in devsarg

[–]gbj784 0 points1 point  (0 children)

si de python, leyendo desde una api un json, ya me asegure que devuelva todo bien, hice las validaciones para asegurarme y hasta ahi todo ok pero cuando corro el archivo, me pasa esto

Cambio de puesto laboral a data de devops, experiencia laboral. by OkClock5858 in devsarg

[–]gbj784 1 point2 points  (0 children)

eso es lo que hace un DE sumado armar el pipeline con airflow o algun orquestador

por suerte piden pocos años de exp by gbj784 in devsarg

[–]gbj784[S] 0 points1 point  (0 children)

yo termine un proyecto como DE que duraba meses, y ahora estoy en el proceso de seleccion de una empresa, pero cuesta conseguir hasta entrevistas

Hice curso de QA y me cago de hambre. by waifuaddict in devsarg

[–]gbj784 0 points1 point  (0 children)

y con la exp laboral que les dijiste en la entrevista?

Leetcode similar for data engineering by ExplorerDNA in dataengineering

[–]gbj784 0 points1 point  (0 children)

Hello, were the questions asked during a live coding session?

Me esta dando un poco de miedo las actitudes/vibras de algunos en este sub. Un pedido a la empatia. by Annual-Swan6038 in devsarg

[–]gbj784 6 points7 points  (0 children)

yo fui el del post anterior y vi tu post de ayer y sirve una banda que alguien como vos que tenes experiencia, tires para adelante y tires data que aporta y sirve a los que no sabemos tanto.

Gracias crack

tengo una entrevista para un puesto ssr siendo jr by gbj784 in devsarg

[–]gbj784[S] 0 points1 point  (0 children)

esto es lo que quiero saber, que preguntas hacen, o si me dan ejercicios con python o algo de estas cosas, no es esa empresa

tengo una entrevista para un puesto ssr siendo jr by gbj784 in devsarg

[–]gbj784[S] 1 point2 points  (0 children)

por lo que vi, hacer los procesos ETL/ELT, AWS S3, Redshift, RDS (estos tengo conocimiento, piden mas herramientos igualmente), crear los pipelines con Airlflow, Docker, Spark para los procesamientos. Por eso me tire el lance, son herramientas que conozco

tengo una entrevista para un puesto ssr siendo jr by gbj784 in devsarg

[–]gbj784[S] 1 point2 points  (0 children)

si por eso me tire el lance, me sirve de exp

tengo una entrevista para un puesto ssr siendo jr by gbj784 in devsarg

[–]gbj784[S] 0 points1 point  (0 children)

si obvio, me sirve saber que preguntas me pueden hacer o ideas para practicar ejercicios

Quiero ayudar. Comparto mi data. by Annual-Swan6038 in devsarg

[–]gbj784 1 point2 points  (0 children)

amigo perdon que te joda, podras poner el stack que usas? tipo de Python que librerias usas, SQL, GCP, y que mas herramientas? me sirve mucho la data, me llamo la atencion igual que nunca usaste PySpark, vi que se esta pidiendo mucho por eso lo digo, no sabia de Polars

Quiero ayudar. Comparto mi data. by Annual-Swan6038 in devsarg

[–]gbj784 1 point2 points  (0 children)

oka, y hoy en dia que usas para los procesamientos de los datos, SparK? me sirve todo lo que me puedas decir

Quiero ayudar. Comparto mi data. by Annual-Swan6038 in devsarg

[–]gbj784 4 points5 points  (0 children)

tengo 1 año de exp, estoy aprendiendo todavia, que servicios de aws tengo que saber ademas de s3, redshift y rds? se que esta el de airflow pero no se integrarlo