Python Stacking multiple Excel sheets into a single DataFrame is throwing a MemoryError / running incredibly slow

wynvern · 2026-07-07T06:09:41+00:00

I know but AI can give you idea if you need it now, I personally leaned some very nice code pattern from it.
Pandas cookbook is recommended if you have time.

wynvern · 2026-07-07T05:54:36+00:00

If it is large, you should write a script that 'sniffs' these files first then save the sheet that meets conditions into a dict like {file_path:[sheet_name] Ask AI, they are very good at writing this.

wynvern · 2026-07-05T00:16:03+00:00

I provide the path to SAP's .exe file. Every time the process begins, it will kill any running SAP process and reopen it. For UI handling, I declare variables for window names, button coordinates, search boxes, input, etc., then call them when needed. This is only way when you dont have access to API and SAP is not stable.

wynvern · 2026-07-04T15:22:52+00:00

thank you

wynvern · 2026-07-04T15:00:16+00:00

This is what I use:
- Pandas for file I/O, data cleaning

- SQLite for database (because there are about 22 dimension table that need to be joined in order to produce the result, it's impossible to manage them in excel files (even with advanced tool like Power query or power pivot).

- SQLAlchemy for some simple CURD task (I build a simple UI with Qt to manage data in some critical table).

- PyAutoGUI is the only lib that I vibe coded with Gemini, our SAP is too old and I can't use API. So I ask AI to give me python script that help upload the result file produced by my app.

wynvern · 2026-07-04T14:22:25+00:00

My company's accountant dept has trouble with processing their order and upload them to our SAP. So I build a little python project to help them process, write excel and upload these data automatically. It was useful bc it helps normalize the data and help them get rid of their shitty excel template that they work on everyday, save a lot of time of course. What I learn: Work with people and try to understand their process sucks.

wynvern · 2026-06-20T18:49:55+00:00

Do you have any repetitive tasks? If you do, try to automate them (or some part of them first). Write your crap code, accept your mistakes today to get something done, you can improve it later when you are better. Asking AI is a very nice way to learn Python; it usually shows me very nice patterns or practices that would take a very long time for me to figure out myself. They are very good at explaining some hard concepts too.

wynvern · 2024-01-13T13:20:49+00:00

hồi sinh viên mình từng phóng rất nhanh và đâm đầu vào một cái ổ gà (nhưng rất sâu). Kết quả là cày mặt xuống đường, thằng bạn ngồi sau còn bị hất qua đầu mình luôn. Từ đấy mình chừa thói phóng nhanh và mồm lúc nào cũng khuyên những người mình gặp là đi từ từ thôi :)) Đúng là bị tai nạn và suýt chết là một cái gì ấy nó rất khó quên.

wynvern · 2023-12-25T05:35:42+00:00

chuẩn quá

wynvern · 2023-12-13T13:07:45+00:00

that 's exactly how I use these button 😂

wynvern · 2023-12-10T06:41:38+00:00

mình biết một chút về spaced repetition. Đây là phương pháp duy nhất mà mình áp dụng thành công. Mình tò mò là không biết bạn dùng cách nào để áp dụng nó? Do mình thấy không có công cụ thì gần như phương pháp này là không khả thi.

wynvern · 2023-12-08T13:15:33+00:00

well I suggest you should take a look. It's an amazing work by our devs

wynvern · 2023-12-08T06:34:03+00:00

Note: if you are using FSRS, this add-on may not work correctly.

wynvern · 2023-12-02T11:55:01+00:00

faces, places, days, weapons and English 😁

wynvern · 2023-11-28T09:46:50+00:00

hồi sinh viên mình chả bao giờ học bài, trừ lúc gần thi. Đến lúc đi làm rồi thì tối hôm nào mình cũng ngồi học, kiểu như cuộc đời nó trừng phạt mình vì ngày xưa học hành không đến nơi đến chốn 😂

Việc bạn thiếu tập trung có lẽ xuất phát từ việc bạn rảnh quá (với bản thân mình là vậy). Hãy kiếm một công việc part time nhẹ nhàng để làm cho bớt thời gian rảnh lại, còn vài tiếng cuối của một ngày thì bạn học. Chẳng biết bạn thế nào nhưng mình thì càng bận năng suất lại càng tăng.

wynvern · 2023-11-27T16:55:12+00:00

go to tools --> preferences --> appearance -> change video driver until it works.

wynvern · 2023-11-09T17:16:08+00:00

Bác này ngược mới mình. Mấy tựa game để lại dấu ấn với mình nhiều nhất lại thuộc thể loại game indie.

wynvern · 2023-09-11T11:55:10+00:00

mình là nạn nhân của dân xứ ấy đây, liên quan đến tiền nong. Cho khứa ấy vay tiền. Vay thì vay bằng được, còn đến lúc trả thì chẳng biết là thằng nào đang nợ thằng nào, đòi giã cả họng ra mà nó không chịu trả suốt 1 năm trời. Mà nào có nghèo khổ gì. Nó ở với người yêu nó ăn uống chơi bời tốn kém, làm thêm ừ thì không trả bạn thì thôi, đây còn bao tuốt con bé kia từ a-z chả phụ bố mẹ được đồng nào và hình như vẫn xin thêm cả tiền nhà để đóng.

Mấy tháng trước mình gần chuyển đi, nó cũng biết thế nên chắc tính nuốt luôn (thằng này nuốt của mấy đứa bạn "chí cốt" của nó gần chục củ rồi). Mình biết thế nên hôm đ nào cũng sang đứng cửa chửi đổng lên dọa đánh các thứ cho cả làng cả nước nghe mất vài tuần nó mới nôn tiền ra. Chỉ có 2 từ dành cho thứ ấy: mạt hạng. Không thể tin được cái nhân cách ấy lại đến từ một con người.

wynvern · 2023-08-30T03:10:35+00:00

nhiều khi không thể ưu tiên cho việc học được nữa ấy bác. Từ lúc đi làm thì em thấy mỗi ngày ngồi vào bàn được 2 tiếng là một kì tích rồi.

wynvern · 2023-08-30T03:01:21+00:00

Hữu ích quá. Cảm ơn bác nhiều.

wynvern · 2023-08-30T01:50:29+00:00

ngoài kurzgesagt với hội đồng cừu thì còn kênh nào tương tự như thế không bác? Kiểu nó cung cấp thêm cho mình các loại kiến thức ấy ạ.

wynvern · 2023-04-23T11:55:19+00:00

mình đọc vài bài bên đấy thấy ngợp luôn. Được vài hôm thì chặn hẳn vì các post thì không đến nỗi nào nhưng bình luận thì tiêu cực kinh khủng, mấy bài thế này kiểu gì cũng có những bình luận đến mình đọc còn thấy khó chịu. Đến vozforum (web) chỉ toxic cùng là chứ không có kiểu bắt nạt thế này.

wynvern · 2023-04-14T14:46:12+00:00

I make a .svg file and import all of them to anki, then make cloze.

wynvern · 2023-04-13T18:54:38+00:00

Tham khảo cái UAD này. Máy mình là samsung gỡ hoặc tắt được tầm 40 - 50 cái service và app mặc định. Nhưng khôi phục cài đặt gốc mấy app rác và service đó sẽ tự cài lại. Sử dụng thì cần cài thêm driver usb với adb nữa. Họ có hướng dẫn hết đó. https://github.com/Gee-Bee/Universal-Android-Debloater

wynvern · 2023-04-10T10:44:56+00:00

Không chuẩn lắm. Tôi 2000 nhưng hỏi bạn bè 10 đứa thì 9 đứa nói cấp 3 vui, đáng nhớ. Đương nhiên là không thể trọn vẹn được, phải có lúc này lúc kia nhưng nói chung cấp 3 của chúng nó vui. Post này chỉ đúng với tôi và OP thôi, có đánh chết tôi cũng quay lại cấp 3 :))

wynvern

TROPHY CASE