Khi bản phân tích esports rỗng ruột: hơn 80 chữ N/A và cái bẫy của khuôn mẫu chín phần

2 giờ 47 phút sáng, một tệp tài liệu hơn 4.000 từ được đẩy vào nhóm chat nội bộ của nhóm phân tích. Người gửi để lại đúng một dòng: “Bản đầy đủ, mọi người xem qua.” Tôi mở ra. Trang bìa có logo, có mã tài liệu, có dòng phân loại nội bộ. Mục lục liệt kê chín phần: phân tích bản cập nhật và meta, hệ thống giải đấu và thể thức, đội tuyển và tuyển thủ, cục diện khu vực, tài chính câu lạc bộ, luật và quản trị, hồ sơ rủi ro, câu chuyện truyền thông, và truyền dẫn ngành.

Mỗi phần đều có bảng. Mỗi bảng đều có dòng. Mỗi dòng đều ghi cùng một cụm từ: “N/A — không đủ thông tin”. Ma trận rủi ro sáu ô, cả sáu ô giống hệt nhau. Thang đánh giá giá trị thông tin bốn chiều, cả bốn chiều đều là một ngôi sao rỗng trên năm. Phần kết luận ghi độ tin cậy “Cao” cho từng nhận định — tin cậy cao rằng chúng tôi chẳng biết gì.

Tôi ngồi nhìn tệp đó khá lâu. Nó đẹp. Nó có kỷ luật. Và nó rỗng hoàn toàn. Đếm sơ, cụm “không đủ thông tin” xuất hiện hơn tám mươi lần, trải đều trên chín phần, trung bình hơn mười lần mỗi phần. Đó là con số đầu tiên tôi ghi lại trong đêm hôm đó, và cũng là con số duy nhất trong cả tài liệu có thể kiểm chứng được.

Ngành esports không mua quan sát, ngành esports mua kết luận

Trong mười năm gần đây, bộ phận phân tích của các tổ chức thể thao điện tử ở Việt Nam và Hàn Quốc chuyển từ chỗ ngồi xem lại băng trận đấu sang chỗ sản xuất tài liệu. Lý do rất thực dụng. Giám đốc thể thao cần bảo vệ một thương vụ trước hội đồng quản trị. Nhà tài trợ cần biện minh cho việc gia hạn hợp đồng. Đài truyền hình cần một lý do để dịch khung giờ phát sóng. Không ai trong số đó đọc báo cáo trận đấu. Họ đọc khuôn mẫu.

Khuôn mẫu chín phần mà tệp tài liệu kia sử dụng ra đời đúng từ nhu cầu đó. Nó bắt đầu bằng bản cập nhật và meta, vì meta quyết định giá trị của cả một đội hình. Nó đi qua thể thức giải đấu, vì thể thức quyết định xác suất gây bất ngờ. Nó chạm vào cục diện khu vực, vì vị trí địa lý quyết định dòng chảy tuyển thủ. Nó kết thúc bằng tài chính câu lạc bộ và truyền dẫn ngành, vì đó là nơi tiền thực sự đổi chủ.

Một khuôn mẫu như vậy có giá trị thật. Nhưng nó mang một tính chất nguy hiểm: khuôn mẫu có thể được thực thi đầy đủ mà không cần bất kỳ dữ liệu đầu vào nào. Chín phần, ba mươi bảng, hàng trăm ô — tất cả đều có thể được lấp bằng cùng một chuỗi ký tự. Cấu trúc là cái thùng. Nó không phải là nước.

Và trong ngành này, thùng rỗng vẫn được tính là sản phẩm.

Giải phẫu một báo cáo rỗng

Cách tài liệu tự đánh giá chính mình là chỗ đáng dừng lại lâu nhất. Ở cuối mỗi phần, mục “kết luận phân tích” vẫn trình bày ba nhận định, mỗi nhận định kèm một nhãn độ tin cậy. Nhận định thứ nhất ghi rằng không xác định được trò chơi và phiên bản, độ tin cậy Cao. Nhận định tiếp theo ghi rằng không thể đánh giá hướng meta, độ tin cậy Cao. Nhận định cuối ghi rằng mọi suy luận sẽ là phỏng đoán nên được giữ lại, độ tin cậy Thấp.

Đọc kỹ sẽ thấy một nghịch lý. Hệ thống đánh giá độ tin cậy đang hoạt động chính xác, nhưng nó đang đánh giá sự thiếu hiểu biết, chứ không đánh giá sự kiện. Nhãn “Cao” ở đây không nói rằng chúng ta hiểu rõ vấn đề. Nó nói rằng chúng ta rất chắc chắn về việc mình không biết gì. Về mặt logic thì đúng. Về mặt vận hành thì vô dụng, vì người đọc lướt qua sẽ thấy hàng loạt nhãn “Cao” và mặc định rằng tài liệu này đáng tin.

Đây là cơ chế tôi gọi là rửa nhãn. Một ô trống được gắn nhãn độ tin cậy sẽ trông giống một kết luận đã qua kiểm định. Không ai đọc phần chữ nhỏ để phát hiện rằng nhãn đó đang nói về chính khoảng trống.

Bảng đánh giá giá trị thông tin có bốn chiều: giá trị cạnh tranh, giá trị ngành, giá trị thời điểm, giá trị tham chiếu. Cả bốn đều một trên năm sao. Nhưng một trên năm sao nghĩa là gì? Nó có thể nghĩa là dữ liệu rất tệ, cũng có thể nghĩa là không có dữ liệu để đánh giá. Hai tình huống này dẫn tới hai hành động hoàn toàn khác nhau: tình huống đầu là thu thập lại, tình huống sau là sửa đường ống. Thang điểm thiếu một trạng thái “chưa xếp hạng”, và chính sự thiếu sót đó đã xóa sổ thông tin quan trọng nhất của cả tài liệu.

Ma trận rủi ro cũng vậy. Sáu nhóm rủi ro — cạnh tranh, tài chính, nhân sự, luật lệ, dư luận, hệ thống — và cả sáu đều cùng một giá trị. Một ma trận mà mọi ô giống hệt nhau thì mang đúng không phần trăm thông tin, nhưng vẫn chiếm trọn trọng lượng thị giác của trang giấy. Người đọc sẽ nhớ rằng có một ma trận rủi ro, chứ không nhớ rằng ma trận đó chẳng phân biệt được điều gì.

Gốc rễ nằm ở chi phí. Một quy trình phân tích được chia thành các giai đoạn: trích xuất dữ kiện, chuẩn hóa, rồi phân tích. Khi giai đoạn trích xuất trả về kết quả rỗng, các giai đoạn sau vẫn chạy. Chi phí chạy một phân tích rỗng gần bằng không, nên không ai bấm nút dừng. Máy không phân biệt được “không có dữ liệu” với “dữ liệu bằng không”. Nó chỉ biết rằng đầu vào đúng định dạng, nên nó cho đầu ra đúng định dạng.

Kết quả là một tài liệu vượt qua mọi bài kiểm tra hình thức và thất bại ở bài kiểm tra duy nhất có ý nghĩa: nó có giúp ai ra quyết định tốt hơn không?

Điều mà ngành này thực sự làm với dữ liệu thật

Tôi từng nghĩ báo cáo rỗng là hiện tượng hiếm. Nó không hiếm. Nó chỉ hiếm khi bị đưa ra ánh sáng, vì báo cáo rỗng thường không được gửi đi.

Cái phổ biến hơn là báo cáo đầy. Dựa trên kinh nghiệm theo dõi các trận đấu của tôi ở cả giải Việt Nam và giải Hàn Quốc, tôi thấy một mô thức lặp lại: khi mẫu dữ liệu nhỏ, người ta không thu hẹp kết luận, người ta tăng độ chính xác của con số. Một chuỗi mười một trận được trình bày với tỷ lệ chính xác tới hai chữ số thập phân. Một cửa sổ thay người mười phút trong một trận được gọi là xu hướng meta. Một đoạn clip lan truyền được đối chiếu với chỉ số tương tác mạng xã hội, rồi từ đó suy ra giá trị thương mại của một tuyển thủ.

Con số càng nhiều chữ số thập phân, người ta càng ít kiểm tra nguồn. Đó là một quy luật tâm lý, không phải quy luật thống kê. Sai số lớn nhất trong ngành này không nằm ở những ô ghi “không biết”. Nó nằm ở con số có bốn chữ số sau dấu phẩy mà không ai buồn hỏi nó đến từ đâu.

Thế giới nhìn ngôi sao, tôi nhìn vào bảng giá trị. Và bảng giá trị, trong phần lớn các tài liệu tôi từng đọc, được lấp bằng những con số có nguồn gốc không thể truy vết.

Tài liệu rỗng là tài liệu trung thực nhất trong tuần

Nếu phải chọn giữa một tệp chín phần toàn chữ “không đủ thông tin” và một tệp chín phần đầy số liệu không kiểm chứng được, tôi chọn tệp thứ nhất. Không phải vì nó hữu ích. Mà vì nó không gây hại.

Một tài liệu rỗng khiến người đọc dừng lại, đặt câu hỏi về đường ống dữ liệu, và gửi lại yêu cầu. Một tài liệu đầy nhưng sai khiến hội đồng quản trị phê duyệt một thương vụ chuyển nhượng, khiến nhà tài trợ gia hạn một hợp đồng dựa trên chỉ số tương tác ảo, khiến một đội tuyển xây chiến thuật quanh một xu hướng chỉ tồn tại trong mẫu mười một trận.

Con số không biết nói dối, chỉ có người đọc hiểu sai. Nhưng trong nghề này, người viết cũng hiểu sai, và thường là hiểu sai có chủ đích, bởi vì cơ cấu khuyến khích trả tiền cho một khuôn mẫu được lấp đầy, chứ không trả tiền cho một khuôn mẫu được trả về trống. Một nhà phân tích nộp báo cáo rỗng sẽ bị hỏi tuần này anh làm gì. Một nhà phân tích nộp báo cáo đầy sẽ được khen là chăm chỉ, kể cả khi một nửa số liệu trong đó được sao chép từ tuần trước.

Đó là lý do tôi không xem tài liệu rỗng kia là thất bại. Tôi xem nó là bằng chứng. Nó phơi bày một sự thật về ngành: hệ thống vận hành của chúng ta có thể sản xuất ra một tài liệu hoàn hảo về hình thức mà không cần bất kỳ sự thật nào về nội dung. Và đã có rất nhiều tài liệu như vậy được gửi đi, chỉ khác là chúng được lấp bằng số.

Một ô trống không làm sụp đổ một giải đấu. Nó chỉ phơi bày sự thật về túi tiền của những người đang tưởng mình đang đọc dữ liệu.

Kết luận tiến về phía trước

Khi dữ liệu lên tiếng, cả thế giới bỗng lắng nghe. Nhưng dữ liệu im lặng cũng là một tiếng nói, và ngành này chưa học được cách nghe nó.

Tôi cho rằng trong vài mùa giải tới, lợi thế cạnh tranh của một tổ chức esports sẽ không nằm ở việc thu thập được nhiều dữ liệu hơn đối thủ. Nó nằm ở việc nói câu “chúng tôi không biết” nhanh hơn đối thủ bốn mươi tám giờ. Một câu lạc bộ dám trả báo cáo về trống sẽ tiết kiệm được khoản tiền mà câu lạc bộ bên cạnh đang đốt vào những thương vụ dựa trên con số không nguồn.

Tôi đã tìm thấy viên kim cương giữa đống dữ liệu hỗn độn. Nó là một ô trống, và nó là ô duy nhất trong cả tài liệu dám nói thật.