đồ án 2 dự báo tồn kho bán lẻ với deep learning trong doanh nghiệp bán lẻ hàng điện tử

Phân công

Lê Quang Trung (20520333):

• Tìm hiểu nghiệp vụ.

• Khảo sát các mô hình có sẵn.• Tiền xử lý dữ liệu.

Quản lý hàng tồn kho

• Định nghĩa về hàng tồn kho và SKU

• Ý nghĩa: Chi phí giữ hàng và mua hàng

• Nghiệp vụ bổ sung hàng và hoạch định nhu cầu

• Reorder Point = Lượng an toàn + (Lượng dùng tháng x Thời gian bổ sung)

• Economic Order Quantity:  

• Lịch sử thời gian bổ sung• Các dữ liệu kinh tế vĩ mô

Dự báo hàng tồn kho

• Tập trung vào dự báo nhu cầu (demand forecast)• Dự báo định lượng, định tính

• Dự báo định lượng là bài toán dự báo time series

• Các dạng time series: Ngang, xu hướng, mùa vụ, chu kỳ• Kỹ thuật phân tích: Phân rã STL, hàm tự tương quan ACF

• Các mô hình toán học đã được dùng vào dự báo nhu cầu: Hồi quy tuyến tính, trung bình trượt, làm mịn lũy thừa, hồi quy động, học máy, học sâu (RNN, LSTM).

Hàng tồn kho trong bán lẻ điện tử

• Hàng điện tử rất đa dạng về mẫu mã, có vòng đời ngắn, thông số và thương hiệu ảnh hưởng mạnh đến quyết định mua Một sản

phẩm mới ra mắt có nhu cầu rất cao rồi giảm dần.

• Nhu cầu 1-3 tháng trước có ảnh hưởng đáng kể đến tháng hiện tại.• Lịch sử nhu cầu thường ngắn.

• Các thông tin về thương hiệu, thông số, ngày ra mắt có ích cho việc dự báo

Học sâu

Mạng nơ-ron hồi quyBộ nhớ dài-ngắn hạn

Khảo sát một số mô hình dự báo trên Kaggle

• Vấn đề: Dự báo nhu cầu hàng tồn kho bánh dùng gradient boosting

• Bộ dữ liệu: Lịch sử bán hàng, danh mục khách hàng, sản phẩm LSBH có 11 cột và

74,180,464 điểm dữ liệu (doanh số tuần).

• Mô hình: LGBMRegressor của framework LightGBM với tốc độ học (learning_rate)

0.01, số cây (n_estimators) 3000 và số lá tối đa (num_leaves) 5

• Đánh giá: RMSLE 0.58584 với k-cross validation và k = 3 => Rất tốt

• Nhận xét: Mô hình có độ chính xác cao hơn các mô hình máy học truyền thống

khác và có tích hợp lượng hàng trả về vào dự báo nhu cầu Tuy nhiên, khó có thể thông hiểu ý nghĩa và bản chất của mô hình Điều này có thể dẫn đến các vấn đề khi sử dụng trong môi trường doanh nghiệp đòi hỏi làm rõ bản chất của mô hình Mô hình cũng không tính lượng hàng đang vận chuyển hay xuất kho vào nhu cầu do

không có dữ liệu.

Khảo sát một số mô hình dự báo trên Kaggle

• Vấn đề: Dự báo nhu cầu hàng tồn kho thiết bị cắm trại dùng LSTM

• Bộ dữ liệu: Lịch sử bán hàng với 1947 cột (doanh thu ngày) và 30,464 điểm dữ liệu

(sản phẩm)

• Mô hình: Residual LTSM của framework PyTorch với tốc độ học (learning_rate) 1e-4,

số nơ-ron đầu vào (input_size) 1, số nơ-ron ẩn (hidden_size) 64, số lớp (num_layers) 3.

• Đánh giá: MSE 0.05552 => Khá tốt

• Nhận xét: Mô hình dự báo khá tốt Mô hình nắm bắt được sự phụ thuộc lâu dài và

xử lý tốt dữ liệu tuần tự Tuy nhiên, nhược điểm của mô hình là việc đào tạo mô hình có thể tốn nhiều thời gian, tài nguyên tính toán và yêu cầu lượng lớn dữ liệu huấn luyện Ngoài ra còn có nhược điểm không tính lượng hàng đang vận chuyển, xuất kho, bị trả về do không có dữ liệu.

Khảo sát một số mô hình dự báo trên Kaggle

• Vấn đề: Dự báo tổng nhu cầu hàng tồn kho thiết bị cắm trại của các cửa hàng

dùng SARIMA (Bộ dữ liệu như trước)

• Mô hình: SARIMA của framework Statsmodel với bậc q (tự hồi quy) 2, bậc d (sai

khác) 1, bậc r (trung bình trượt) 2.

• Đánh giá: MAE 551.55 => Khá tốt

• Nhận xét: Mô hình dự báo khá tốt Mô hình có hiệu quả tốt trong việc nắm bắt

các mẫu mùa vụ và xử lý được các dữ liệu không có tính dừng Tuy nhiên, nhược điểm của mô hình là sự phức tạp trong việc xác định các tham số cho mô hình và cần lượng lớn dữ liệu lịch sử để có thể xây dựng mô hình Ngoài ra còn có nhược điểm không tính lượng hàng đang vận chuyển, xuất kho, bị trả về do không có dữ liệu.

Xây dựng mô hình

• Bộ dữ liệu: Dùng bộ dữ liệu thương mại điện tử của công ty OList ở Brazil để xây

các mô hình OList là công ty e-commerce kinh doanh nhiều mặt hàng với nhiều kho đặt tại nhiều thành phố

Xây dựng mô hình

Tiền xử lý dữ liệu:

Ta được bộ dữ liệu các chuỗi thời gian nhu cầu của 20 SKU có nhu cầu cao nhất Mỗi SKU được xác định bởi mã sản phẩm (product_id) và thành phố (city) Mỗi SKU có một chuỗi thời gian bắt đầu từ 2016-10-01 và kết thúc ở 2018-08-01 Tần số chuỗi thời gian là tháng nên mỗi SKU có 23 điểm thời gian Tổng cộng ta có 1564 điểm dữ liệu và 4 đặc trưng:

• Mã sản phẩm (product_id)• Thành phố (city)

• Thời điểm (time)

• Lượng nhu cầu (demand)

Nhu cầu của một SKU trong một tháng là số lần nó được đặt trong tất cả các đơn hàng trong tháng đó.

Xây dựng mô hình

Tiền xử lý dữ liệu: Chia bộ dữ liệu thành tập huấn luyện và tập kiểm tra như sau:

• Tập huấn luyện: Các điểm dữ liệu với thời điểm từ 2016-10-01 đến 2018-05-01.• Tập kiểm tra: Các điểm dữ liệu với thời điểm từ 2018-06-01 đến 2018-08-01.

Xây dựng mô hình

Phân tích dữ liệu

• Nhu cầu của 4 SKU

• Xu hướng có sự tăng manh rồi giảm dần tại tháng 1 năm 2018

• Thành phần còn lại (resid) khá thấp.

đối của xu hướng và sự không tồn tại của mùa.

• Mô hình sẽ dự báo lượng nhu cầu cho 3 tháng tương lai dựa vào 3 tháng

quá khứ.

• Bộ dữ liệu được chia thành các cửa sổ với 3 điểm dữ liệu quá khứ và 3 điểm dữ liệu tương lai trước khi đưa vào mô hình

Xây dựng mô hình

Hồi quy tuyến tính

• Dùng lớp LinearRegressor của thư viện scikit-learn

• Mã sản phẩm (product_id) và thành phố (city) được mã hóa one-hot.

• Thời gian (time) được chuyển từ dạng yyyy-mm-dd sang dạng ordinal (số ngày tính từ ngày 1 tháng 1 năm 1).

Xây dựng mô hình

Hồi quy tuyến tính

• Dùng lớp ARIMA của thư viện statsmodel

• Mỗi SKU có một mô hình riêng

• ARIMA được dùng thay vì SARIMA vì dữ liệu không có tính mùa

• Tham số mô hình: (p, d, q) = (1, 0, 1)

Xây dựng mô hình

Đánh giá và so sánh

• Dùng phương pháp bottom-up để dự báo tổng nhu cầu cho các sản phẩm từ các dự báo nhu cầu theo SKU.

Học sâu RNN LSTM

Xây dựng mô hình

Đánh giá và so sánh

• Dùng phương pháp bottom-up để dự báo tổng nhu cầu cho các vùng địa lý thành phố từ các dự báo nhu cầu

Xây dựng mô hình

Đánh giá và so sánh

• Ta thấy các mô hình tạm ổn nhưng vẫn còn nhiều sai sót

• Phần lớn các SKU không có đủ lịch sử nhu cầu để các mô hình nắm bắt được đủ thông tin Ngoài ra, còn có các yếu tố bên ngoài như thông tin về các chương trình khuyến mãi, các chỉ số kinh tế, thương hiệu, thông số sản phẩm,… chưa được đưa vào các mô hình

• Các siêu tham số của các mô hình chưa được tối ưu hóa.

• Mô hình ARIMA cho các dự báo gần giá trị thật nhất trong khi hồi quy tuyến tính và học sâu cho các dự báo sai lệch hơn

• Độ chính xác thấp hơn của mô hình hồi quy tuyến tính là do các lượng nhu cầu hiếm khi thay đổi tuyến tính

• Khảo sát và đánh giá một số mô hình dự báo hàng tồn kho có sẵn.

• Thu thập và phân tích một bộ dữ liệu hàng tồn kho của một doanh nghiệp bán lẻ hàng điện tử.

• Xây dựng mô hình học sâu dùng LSTM, mô hình ARIMA và mô hình hồi quy tuyến tính để dự báo hàng tồn kho (theo SKU, sản phẩm, vùng địa lý thành phố) của một doanh nghiệp bán lẻ hàng điện tử.

• Đánh giá, so sánh và nhận xét các mô hình vừa xây.

Kết luận

Hướng phát triển

• Cần thu thập thêm nhiều dữ liệu để cải thiện độ chính xác.

• Tối ưu hóa các siêu tham số của các mô hình để cải thiện độ chính xác.• Khám phá các mô hình học máy khác.

• Dự báo nhu cầu của các SKU mới dùng nhu cầu các SKU đời cũ tương tự.• Tích hợp các dữ liệu về hàng trả và khuyến mãi vào mô hình.

• Tích hợp các chỉ số kinh tế như lạm phát, tăng trưởng GDP, giá dầu vào mô hình.

Thank youHà Phi Hùng (20520526)Lê Quang Trung (20520333)