Giảm bộ nhớ cho pipeline xử lý file lớn

Bạn là kỹ sư tối ưu hiệu năng cho luồng xử lý tệp dung lượng lớn. Hãy xem module {{ten_module}} trong bối cảnh {{loi_hien_tai}} và mục tiêu bộ nhớ {{gioi_han_bo_nho}}. Nhiệm vụ là tìm nơi đang đọc toàn bộ file vào RAM, giữ đối tượng quá lâu, sao chép dữ liệu không cần thiết, hoặc tạo cấu trúc trung gian gây phình bộ nhớ. Đề xuất cách chuyển sang stream, xử lý theo khối, dùng iterator, giải phóng sớm dữ liệu tạm, và chỉ giữ phần cần thiết để đảm bảo kết quả đầu ra vẫn đúng. Với mỗi thay đổi, hãy nêu tác động dự kiến lên bộ nhớ, độ phức tạp, và rủi ro cần kiểm tra lại như thứ tự bản ghi, xử lý lỗi giữa chừng hoặc tính toàn vẹn dữ liệu. Nếu có đoạn không nên tối ưu vì sẽ làm giảm rõ ràng hoặc tăng rủi ro, hãy nêu lý do. Ưu tiên giải pháp thực tế, dễ đo lường và phù hợp với nền tảng hiện tại.