Theo dõi giá thực phẩm ở Áo bằng scraping
(mastodon.gamedev.place)- Trong bối cảnh áp lực từ giá thực phẩm và năng lượng gia tăng ở Áo, nhân việc chính phủ thông báo sẽ lập một cơ sở dữ liệu giá còn hạn chế, Mario Zechner đã tự xây dựng một nền tảng theo dõi giá dựa trên các cửa hàng trực tuyến của những chuỗi bán lẻ lớn
- Prototype đầu tiên, bao phủ toàn bộ sản phẩm của hai chuỗi lớn, được tạo ra chỉ trong 2 giờ; sau đó được bổ sung dữ liệu cửa hàng ở Đức và Slovenia, chuẩn hóa danh mục, ghép nối sản phẩm tương tự và các công cụ phân tích
- Khi kết hợp cả dữ liệu do một nguồn ẩn danh cung cấp, được thu thập từ năm 2017, nền tảng có thể kiểm chứng cả diễn biến trong quá khứ của một mô hình: giá các sản phẩm nhãn riêng của hai chuỗi lớn trùng khớp đến từng cent
- Dữ liệu giá lịch sử cho thấy các trường hợp giá được điều chỉnh khớp nhau trong cùng ngày hoặc chênh 1–2 ngày, shrinkflation, và những sản phẩm giống hệt có giá ở Áo cao hơn Đức tới 40%
- Thị trường thực phẩm ở Áo có tỷ lệ hàng giảm giá cao, khoảng 40%, nên dù tuyên bố giảm giá niêm yết, số tiền trung bình người tiêu dùng thực trả vẫn có thể tăng do cấu trúc khuyến mãi luân phiên
Thông báo cơ sở dữ liệu giá của chính phủ và khởi đầu của dự án cá nhân
- Áo có mức lạm phát cao hơn trung bình EU, đặc biệt chịu áp lực ở các mặt hàng thiết yếu như năng lượng và thực phẩm
- Vào tháng 5, chính phủ thông báo sẽ cùng các chuỗi thực phẩm lớn xây dựng một cơ sở dữ liệu giá thực phẩm
- Bộ trưởng phụ trách cho biết khối lượng công việc lớn nên sẽ mất đến mùa thu
- Phạm vi chỉ giới hạn ở 16 nhóm sản phẩm, như bột mì và sữa
- Tần suất cập nhật dự kiến là mỗi tuần một lần
- Khi nghe tin này, Mario Zechner đã tạo một prototype nhắm tới toàn bộ sản phẩm của hai chuỗi lớn chỉ trong 2 giờ
- Nền tảng hoạt động bằng cách crawl các cửa hàng trực tuyến của các siêu thị
- Phần lớn cửa hàng có API
- Dữ liệu thu thập được chuẩn hóa để có thể so sánh giữa các cửa hàng
- Sau đó dữ liệu được cung cấp ở dạng có thể công khai và phân tích
Mở rộng nền tảng và dữ liệu giá từ năm 2017
- Sau nền tảng ban đầu, dữ liệu cửa hàng ở Đức và Slovenia cũng được bổ sung
- Các kỹ thuật khoa học dữ liệu nhẹ được thêm vào để chuẩn hóa danh mục sản phẩm vốn khác nhau giữa từng cửa hàng, cũng như ghép nối các sản phẩm giống hoặc tương tự
- Một người dùng ẩn danh trên Twitter đã cung cấp dữ liệu được crawl từ hai chuỗi lớn kể từ năm 2017
- Zechner tích hợp dữ liệu này vào nền tảng và bổ sung công cụ phân tích
- Phân tích ban đầu cho ra kết quả cho thấy mức tăng giá có thể được xem là lớn, ngay cả khi tính đến tác động của giá năng lượng tăng
Giá trùng khớp giữa các chuỗi và thay đổi giá đồng thời
- Phân tích đầu tiên trước khi xây dựng nền tảng là so sánh thủ công các sản phẩm giá thấp nhất do hai chuỗi lớn tự bán
- Ví dụ là các sản phẩm nhãn riêng của cửa hàng như sữa hoặc bột mì
- Giá của 40 cặp sản phẩm khớp chính xác đến từng cent
- Một NGO thấy nội dung này trên Twitter và thực hiện phân tích tương tự với 600 cặp sản phẩm; kết quả cho thấy cùng một xu hướng
- Khi dữ liệu lịch sử được tích hợp, có thể so sánh thời điểm biến động giá của cùng một sản phẩm ở hai chuỗi
- Đối với các sản phẩm nhãn riêng giá rẻ, đã xuất hiện các trường hợp giá thay đổi ở hai chuỗi vào cùng ngày, hoặc chỉ lệch 1–2 ngày, rồi đạt cùng một mức giá
- Mô hình này không chỉ xuất hiện ở nhãn riêng giá rẻ mà còn được ghi nhận ở các sản phẩm nhãn riêng tầm trung
- Zechner nhận thấy khả năng xảy ra thông đồng ngầm (tacit collusion), trong đó giá trong thị trường độc quyền nhóm được căn chỉnh với nhau mà không cần phối hợp công khai
- Ông nói các nền tảng tương tự khác cũng thấy cùng mô hình này
- Mô hình này được cho là xuất hiện từ giai đoạn lạm phát tăng mạnh
Shrinkflation và chênh lệch giá giữa các quốc gia
- Phân tích của nền tảng cũng xác nhận các trường hợp shrinkflation
- Tức là dung lượng/khối lượng sản phẩm giảm nhưng giá vẫn giữ nguyên hoặc cao hơn
- Ví dụ được nêu là bột giặt
- Cũng có trường hợp cùng một sản phẩm ở Đức rẻ hơn tới 40%
- Đức được trình bày là quốc gia có thu nhập bình quân và chi phí sinh hoạt cao hơn
- Một số sản phẩm chỉ được sản xuất ở Áo cũng có giá rẻ hơn bên ngoài Áo
- Billa được nhắc đến như phiên bản REWEDE tại Áo
- Ngay cả Red Bull, một thương hiệu của Áo, cũng có trường hợp giá khuyến mãi ở Áo còn đắt hơn giá thường ở Đức
Cơ cấu khuyến mãi và tác động thực tế của “giảm giá”
- Tỷ trọng khuyến mãi trong thị trường thực phẩm Áo đặc biệt lớn
- Ở các thị trường thực phẩm cạnh tranh thông thường, trung bình khoảng 10–20% sản phẩm được cho là đang giảm giá
- Ở Áo, tỷ lệ đó được nói là 40%
- Khuyến mãi khiến người tiêu dùng khó biết giá thực sự phải trả
- Người tiêu dùng khó biết giá cho đến khi đến cửa hàng và xem khuyến mãi trong ngày
- Các chuỗi gửi tờ rơi khuyến mãi qua bưu điện và cũng dùng cách cho khách sưu tập sticker để dán lên sản phẩm tại quầy tính tiền
- Ứng dụng cũng được nhắc đến như một phương tiện để nhận thông tin người dùng
- Sau các bài viết tiêu cực, các chuỗi thực phẩm treo thông báo tại cửa hàng rằng “năm nay chúng tôi đã giảm giá 450 sản phẩm”
- Tổng số sản phẩm được nêu là khoảng 22.000
- Chuỗi đó cũng cung cấp danh sách sản phẩm đã giảm giá dưới dạng PDF máy có thể đọc được
- Zechner ghép các sản phẩm trong PDF với cơ sở dữ liệu của mình
- Nhìn bề ngoài, tuyên bố giảm giá được xác nhận là đúng
- Tuy nhiên, một số sản phẩm là một phần của mô hình giá luân phiên đã lặp lại trong nhiều năm, chứ không phải giảm giá vĩnh viễn
- Cũng xuất hiện những trường hợp tinh vi hơn
- Có sản phẩm giảm giá niêm yết, nhưng lại tăng giá khuyến mãi được áp dụng định kỳ
- Dù việc giảm giá niêm yết là thật, nếu người tiêu dùng mua cùng sản phẩm đó hằng tuần, mức giá khuyến mãi tăng có thể khiến số tiền trung bình phải trả cao hơn trước
1 bình luận
Ý kiến trên Hacker News
Tôi từng sống ở Áo và Đức, và chuyện giá siêu thị ở Áo đắt hơn nhiều là đúng 100%, kể cả với hàng sản xuất tại Áo
Lý do là người Đức cực kỳ nhạy cảm với giá và luôn so sánh, còn người Áo trung bình ít để tâm hơn, nên các siêu thị tận dụng điều đó. Áo có mật độ dân số thấp, nhiều cửa hàng khó tiếp cận như ở vùng núi nên chi phí logistics cao hơn; VAT cũng nhỉnh hơn một chút, và lương lao động phổ thông trong siêu thị/logistics cũng cao hơn Đức một chút
Ngoài ra, ngay cả cửa hàng cùng một công ty ở Áo cũng thường trông đẹp hơn ở Đức, kệ hàng gọn gàng hơn, hàng chờ ngắn hơn, nên chi phí vận hành cao hơn. Cuối cùng, nếu người tiêu dùng coi trọng giá như ở Đức và ít quan tâm đến thẩm mỹ hơn thì giá đã giảm; chỉ cần bắt đầu chịu đi bộ xa hơn một chút để tìm siêu thị rẻ hơn thì giá cũng có thể giảm
Ở Áo, giao thông công cộng và xe đạp tốt hơn nhiều, nên người ta không cố tình đi vòng chỉ để ghé cửa hàng thực phẩm rẻ nhất. Những vùng ở Áo dùng ô tô thì mật độ dân số lại quá thấp, nên cạnh tranh giữa các siêu thị cũng không nhiều
Một phần là do VAT ở Hà Lan cao hơn, nhưng tôi cho rằng phần lớn đến từ việc người Hà Lan sẵn sàng trả giá cao hơn người Đức
Với tư cách là một lập trình viên và người tiêu dùng ở Áo, tôi đã theo dõi sát vấn đề này suốt năm nay, và thật bực bội khi chúng tôi đang bị chặt chém mà không có lý do chính đáng nào, nhưng chẳng có gì thay đổi và chẳng ai quan tâm
Thật đáng nể khi Mario vẫn bám lấy chủ đề này và chưa phát chán với cơn điên khó chịu đó
Để doanh nghiệp không hành xử tệ, cần có một người lớn trong phòng. Ta xuất phát từ giả định rằng nếu không bị giám sát, doanh nghiệp sẽ hành xử tệ; điều này giống một giả thuyết cần kiểm chứng hơn là một kết luận chắc chắn
Ít nhất là khi không có hậu quả, doanh nghiệp sẽ hành xử tệ hơn; vì vậy trước đây họ không có “lý do hay” để tăng giá, còn nay lạm phát trở thành tấm bình phong cho việc tăng giá
Những dự án về dữ liệu chỉ số như thế này có vẻ rất tiềm năng như một lĩnh vực, nhất là hiện nay khi các hệ thống AI và machine learning giúp quan sát thay đổi và xu hướng dễ dàng hơn. Vấn đề then chốt là làm thế nào để có được các kết luận và quan sát đủ rõ ràng nhằm khơi dậy sự phẫn nộ mang tính khoa học xã hội đến mức khiến mọi người hành động
Hoặc có lẽ chúng ta cứ chấp nhận việc doanh nghiệp dùng công nghệ này để tối ưu mọi thứ theo hướng bất lợi cho người tiêu dùng, và không nên dùng nó cho kiểu phản kháng white-hat chống lại họ
Tuy nhiên, nếu mỗi năm phát thêm cho mọi người 500 euro dưới dạng Klima bonus thì tôi cũng không biết người ta đã kỳ vọng điều gì. Tôi không hiểu việc đó làm giảm lạm phát bằng cách nào, và có vẻ các chuỗi cửa hàng thực phẩm đang tận dụng điều này
Dù giá cao hay thấp, lý do luôn giống nhau: mức giá đó giúp họ kiếm được nhiều tiền nhất
Những công ty như vậy phản ứng cực kỳ nhạy khi điều gì đó bắt đầu ảnh hưởng đến lợi nhuận của họ. Có thể không phải Bournvita mà là một phụ gia sữa tương tự dành cho trẻ em
Nếu giống như ở Anh, sẽ có quá nhiều shrinkflation đến mức việc so sánh giá sẽ cần giá theo gram. Đó là kiểu giảm kích thước sản phẩm và đổi sang thành phần rẻ hơn: nhìn ngoài vẫn như cùng một bao bì, nhưng lớp không khí trong gói thanh chocolate tăng lên, dưới nắp kem ốc quế có khoảng trống 1 cm, đáy hộp bơ bị lõm vào, hoặc cạnh bao bì trước đây thẳng thì giờ bị thu hẹp lại
Những “mánh khóe” như vậy đã có từ trước, nhưng đang được dùng ngày càng nhiều. Mọi siêu thị đều có cơ sở dữ liệu toàn bộ hàng tồn, nên về cơ bản họ có thể gửi bảng giá mới nhất cho mọi sản phẩm mỗi 5 phút mà gần như không tốn chi phí. Cơ quan lập pháp dường như không tìm, hoặc không có ý định tìm, lời khuyên từ chuyên gia; nhưng dù sao có bắt đầu vẫn hơn
Vấn đề là khi các cửa hàng thực phẩm khiến mọi người dùng thẻ “loyalty”, họ có thể biến mọi thứ thành “giá khuyến mãi”, và như vậy né được yêu cầu hiển thị giá đơn vị. Họ chỉ hiển thị £/KG của giá gốc cao hơn, nên người tiêu dùng không thể dễ dàng so sánh
Có thể tránh được nếu mua sắm ở Aldi hoặc Lidl, nhưng tôi cũng sẽ không ngạc nhiên nếu chẳng bao lâu nữa họ cũng bị cám dỗ bởi giá dành riêng cho thẻ loyalty. Tất nhiên chính họ cũng đã áp dụng shrinkflation
Ví dụ: https://www.tesco.com/groceries/en-GB/products/296117381 — “£3.00 / £10.71/kg” nhưng giá Clubcard là £2.00
Là người Áo, tôi thấy dự án so sánh giá là tốt, nhưng con voi trong phòng là giá ở các cửa hàng tạp hóa Đức thấp hơn 20–40% cho cùng sản phẩm
Lời giải thích của các chuỗi siêu thị, nói nhẹ thì cũng đáng ngờ. Kiểu như ở Áo có nhiều cửa hàng trên đầu người hơn Đức, hoặc họ phải mua từ các nhà phân phối Áo đắt hơn. Tôi cũng từng nghe câu chuyện tương tự rằng Bỉ đắt hơn Pháp
Muốn thay đổi tình hình thì cần so sánh giá trên toàn châu Âu
Các công ty nhỏ thậm chí không có chỗ để đổi mới trong những mảng như quyền tự do lựa chọn sản phẩm hay giờ mở cửa, nên rất khó tham gia thị trường ngay từ đầu
Khi thu thập giá dịch vụ và sản phẩm trên mạng, bạn sẽ thấy rất nhiều điều thú vị, và phần lớn là các mánh khóe gây thiệt cho khách hàng
Tôi nghĩ đã đến lúc EU luật hóa việc các công ty phải cung cấp dữ liệu giá qua API chuẩn hóa. Như vậy mọi người đều có lợi và có thể kiềm chế những mánh khóe này
Tôi thực sự đã xây một scraper cho các gói nghỉ dưỡng Disney World, và cũng phát hiện cách tìm giao dịch rẻ hơn bằng cách chỉ mua riêng vé khách sạn cho một phần thời gian lưu trú. Một ngày nào đó tôi định biến nó thành chỉ số lạm phát kỳ nghỉ
1 - https://mousetrack.co.uk
Bài viết thực sự thú vị. Việc đánh giá giá thực phẩm và điều chỉnh chuyện đi chợ để tối ưu thời gian và chi phí rất mệt, nhưng nếu có một tập dữ liệu quy mô lớn như thế này thì có thể dễ hơn nhiều
Tôi tò mò liệu có phân tích giá tương tự cho Mỹ không
Tất nhiên biên lợi nhuận của từng mặt hàng trong cửa hàng khác nhau, nhưng gần như mọi loại thực phẩm chưa chế biến và có hạn sử dụng đều nằm trong nhóm biên lợi nhuận thấp nhất
Winco, Aldi, Lidl cũng là các hãng tạp hóa nổi tiếng có biên lợi nhuận cực thấp
Không biết các máy chủ Mastodon khác thế nào, nhưng máy chủ này đi trước Twitter vài năm ánh sáng về độ dễ đọc
Hy vọng một ngày nào đó có người viết một cuốn sách vạch trần chính xác điều gì đã sai trong cách tiếp cận thiết kế công ty và sản phẩm của họ
Bên trước có nhiều tài nguyên hơn, nhưng bên sau định hướng sứ mệnh mạnh hơn
Cũng có chế độ “xem nâng cao” nhiều panel, được nói là giống Tweetdeck
Có người thích chế độ tối, nhưng trên thiết bị e-ink thì đọc thật sự kinh khủng. Nếu không đăng nhập vào một instance cụ thể thì không đổi được theme, nên tôi đã mở một yêu cầu liên quan
Một thread tuyệt vời, cho thấy sức mạnh của những công dân thông minh và có năng lực kỹ thuật
Dự đoán của tôi là sẽ chẳng có gì xảy ra. Cơ quan quản lý nhà nước đáng lẽ phải giám sát việc này rất có thể sẽ kết luận rằng không có vấn đề. Vì tôi cho rằng họ đã được mua chuộc sẵn để sau khi rời chính trường thì làm lobbyist hoặc “cố vấn” cho chính các nhà bán lẻ này
Khoảng 6 năm trước, ba nhà mạng lớn của Áo cùng tăng giá đúng cùng một thời điểm, nhưng cơ quan nhà nước phụ trách đã khép lại vụ việc, nói rằng không có bằng chứng ba công ty âm mưu thông đồng giá và cũng có thể chỉ là trùng hợp
Đất nước này tham nhũng đến mức mục ruỗng tận gốc. Là người tiêu dùng và người đóng thuế, tôi đang bị móc túi hợp pháp từ mọi hướng dưới sự ban phước của chính phủ, và tôi nghĩ nhiều nước khác cũng tương tự
Là người Áo, tôi đã gửi liên kết này cho vài nhà báo và bạn bè. Tôi tò mò làm sao biến việc này thành hành động khả thi để chính giới phải nhúc nhích và cũng giúp ích cho người tiêu dùng