Câu chuyện về người làm data

Coaching 1-1 Auto Data 101: Đồng Hành Thu Thập & Xử Lý Dữ Liệu TMĐT Tự Động

Trước đây mình từng làm vài project dùng N8N kéo dữ liệu TMĐT về để quản trị vận hành và phân tích, cũng không có chủ đích làm khóa học. Tình cờ được anh bạn tag vào 1 bài viết của anh Trần Minh đang có nhu cầu học về N8N. Vậy là chỉ sau 1 cú điện thoại trao đổi, hai anh em setup triển khai ngay các buổi hướng dẫn 1 kèm 1.

Gặp nhau mới biết anh Trần Minh đang là Founder/CEO của KBGROUP. Công ty của anh cung cấp các dịch vụ, khóa học về Quản trị và Kế toán cho TMĐT. Thực trạng hiện nay rất nhiều shop TMĐT bị yếu 2 mảng này. Với shop nhỏ thì theo kiểu 1 mình sếp cân tất, shop lớn thì kiểm soát lỏng lẻo thiếu phương pháp và công cụ. Dẫn tới 1 vấn đề nguy hiểm là LÃI ẢO nhưng LỖ THẬT, bán nhiều hàng mà không thấy tiền đâu, không mở rộng được.

Với việc có thể automation các luồng dữ liệu bằng N8N sẽ giúp cho anh Minh tự động hóa các quy trình trong hệ thống Quản trị & Kế toán, giảm thiểu sai xót và thời gian nhập liệu. N8N là nền tảng low/no code nên anh Minh có thể tự mình thiết lập và điều chỉnh các workflow để chạy các tác vụ automation.

———

Mình tóm tắt lại các nội dung chính trong buổi hướng dẫn:

– Tư vấn tổng thể về mô hình dữ liệu cho vận hành và phân tích: tải toàn bộ dữ liệu của shop về Lark Base sẽ gặp những hạn chế và khó khăn gì, giá trị của Data Warehouse, các giai đoạn xử lý data cho các mục đích khác nhau

– Hướng dẫn cài đặt N8N trên VPS bằng docker, tư vấn gói VPS phù hợp với nhu cầu, tiết kiệm chi phí cho shop

– Tư duy xây dựng luồng Data từ nguồn đến đích

– Hiểu về định dạng json, cách lấy đúng dữ liệu trong cấu trúc Json

– Thiết lập và quản trị các Database: Mongodb để lưu dữ liệu thô dạng json, Postgresql lưu dữ liệu dạng bảng (SQL)

– Các kỹ thuật thường gặp khi như xử lý data:

> xử lý data theo lô (batch): lấy data gì, khi nào update cho tối ưu nhất
> tách 1 json có nhiều giá trị (split out): ví dụ 1 đơn có nhiều sản phẩm
> insert và update (upsert): nếu ko có cơ chế này thì data sẽ bị trùng lặp
> tra cứu dữ liệu (lookup): tìm kiếm dữ liệu đã có để đối chiếu hoặc bổ sung
> định dạng (format): đưa về đúng kiểu dữ liệu, cấu trúc

– Hiểu về cách API hoạt động, cách tạo app developer kết nối với shop và lấy access_token

– Cùng lên ý tưởng và xây dựng workflow cho case cụ thể

———

Do không phải là khóa học đã được chuẩn bị sẵn mà bám sát vào tình huống nhu cầu của anh nên có thể gặp những phát sinh và tốn thời thêm thời gian để xử lý. Nhưng bù lại mình có cơ hội để giải thích cặn kẽ hơn về vấn đề, đúng với tinh thần Coaching đồng hành với người học để ra kết quả.

Anh em có nhu cầu về thu thập dữ liệu TMĐT hay các nhu cầu vướng mắc về Data cứ liên hệ mình nhé. Chúc mọi người nghỉ lễ vui vẻ.

Leave a Reply

Your email address will not be published. Required fields are marked *