Đo lường chính xác hơn
NGÀY CẬP NHẬT 19 THáNG 1, 2022
Ngoài ra, chúng tôi không ngừng xem xét các chính sách và quy trình, cũng như phương pháp xây dựng các chính sách và quy trình đó. Bất kỳ thay đổi nào trong số này cũng sẽ làm thay đổi bản chất của chính các phép tính số liệu. Ngoài xu hướng, những thay đổi về phương pháp hoặc quy trình này có thể cho thấy chúng tôi đang giảm thiểu nội dung vi phạm một cách hiệu quả hơn hay kém hiệu quả hơn.
Chất lượng thông tin, nội dung cập nhật và đính chính
Khi các quy trình đo lường của chúng tôi hoàn thiện, chúng tôi sẽ thường xuyên đánh giá và xác thực số liệu của mình. Chúng tôi cũng đặt ra một nhóm các tiêu chuẩn kiểm soát cách chúng tôi xác định, đính chính và báo cáo công khai bất kỳ điểm điều chỉnh nào đối với dữ liệu đã công bố trước đây.
Chúng tôi xác định các vấn đề có thể xảy ra với dữ liệu của mình dựa vào một loạt quy trình kiểm tra chất lượng định kỳ đối với các tập dữ liệu, công cụ đo lường và hệ thống ghi. Khi phát hiện ra một vấn đề tiềm ẩn, các đội ngũ liên quan tại Meta sẽ tiến hành một loạt bước để điều tra, giảm thiểu và xác định cách khắc phục lâu dài vấn đề đó.
Sau khi xử lý xong vấn đề, Meta sẽ cập nhật dữ liệu trong Báo cáo thực thi Tiêu chuẩn cộng đồng. Trong những trường hợp việc đính chính như vậy có một ý nghĩa nào đó, Meta sẽ mô tả vấn đề, số liệu bị ảnh hưởng và khoảng thời gian chịu tác động.
Đính chính và điều chỉnh
Lý do chúng tôi xây dựng quy trình đảm bảo chất lượng thông tin
Chúng tôi cam kết chia sẻ một cách minh bạch số liệu của mình, cũng như quy trình chúng tôi sử dụng để tính toán và cải thiện số liệu đó. Để đơn giản hóa và kiểm soát hữu hiệu hơn việc công bố các điểm đính chính, điều chỉnh đối với phương pháp và số liệu của mình, chúng tôi đã xây dựng một quy trình đảm bảo chất lượng thông tin nhằm xác định, chỉnh sửa và báo cáo công khai mọi điểm điều chỉnh của chúng tôi đối với thông tin đã công bố trước đây. Đây là phương thức phổ biến mà cơ quan liên bang và các hãng thống kê lớn áp dụng cho báo cáo công khai. Phương thức này được xây dựng theo những cách tốt nhất để báo cáo dữ liệu ở cả khu vực nhà nước và tư nhân. Các quy trình và những bước đánh giá mà chúng tôi đã xây dựng này sẽ đóng vai trò quan trọng trong việc duy trì tính chính xác và toàn vẹn cho báo cáo của chúng tôi trong tương lai.
Chúng tôi không ngừng đánh giá, xác thực số liệu của mình và đảm bảo thông tin mình chia sẻ là chính xác, cũng như những phương pháp mà chúng tôi dùng để tạo ra dữ liệu này là có cơ sở. Là một phần trong công việc nói trên, khi cập nhật phương pháp hoặc điều chỉnh số liệu của mình, chúng tôi sẽ chia sẻ các thay đổi đó ở đây.
Cách chúng tôi đánh giá và cải thiện số liệu
Chúng tôi không ngừng tinh chỉnh các quy trình và phương pháp của mình để cung cấp số liệu chính xác và có ý nghĩa nhất về cách chúng tôi thực thi chính sách. Vào mùa hè năm 2019, chúng tôi đã triển khai quy trình đảm bảo chất lượng thông tin. Theo quy trình này, sẽ có thêm các bước kiểm tra và cân nhắc để đảm bảo số liệu mà chúng tôi chia sẻ là đúng đắn và nhất quán.
Xác định các trường hợp ưu tiên để xác nhận tính đúng đắn
Chúng tôi xác định các tham số khác nhau của từng số liệu và xây dựng phương pháp phân khúc những trường hợp ưu tiên dựa trên rủi ro có thể ảnh hưởng đáng kể đến số liệu. Đối với các phân khúc trong danh sách ưu tiên này, chúng tôi triển khai nhiều bước kiểm tra để đảm bảo các phân khúc này ghi lại thông tin một cách chính xác.
Ví dụ: chúng tôi chia nhỏ số liệu nội dung bị xử lý theo nhiều tham số để đánh giá. Chẳng hạn, chúng tôi chia nội dung dựa theo việc nội dung do hệ thống tự động hay chuyên viên xét duyệt xử lý, lý do chúng tôi xử lý và loại nội dung (ảnh, văn bản, video) chúng tôi xử lý.
Với các tham số khác nhau này, tiếp đến, chúng tôi đánh giá mức độ sai lệch trong phương pháp đo lường của mình nếu tham số đó không được biểu thị chính xác trong số liệu (ví dụ: nếu chúng tôi không tính đến nội dung video trong số liệu). Thông qua các bước đánh giá này, chúng tôi xác định được những tham số có thể tác động đến số liệu (chẳng hạn như liệu có phải do con người xử lý hay không).
Sau đó, chúng tôi tính toán mức độ tác động đến số liệu nếu tham số đó không chính xác (giả sử chúng tôi không ghi lại bất kỳ nội dung nào do con người xử lý). Tiếp theo, chúng tôi ưu tiên các trường hợp nhiều rủi ro nhất để thêm bước kiểm tra chéo. Đối với các tổ hợp rủi ro cao này, chúng tôi xây dựng hệ thống kiểm tra chéo và theo dõi bổ sung nhằm đảm bảo những số liệu này được ước tính chính xác.
Kiểm tra tính đúng đắn và nhất quán
Chúng tôi cũng triển khai các bước kiểm tra tính nhất quán để tăng tính xác thực cho số liệu của mình. Các bước kiểm tra này bao gồm:
Kiểm tra tính nhất quán
Chúng tôi đo lường định kỳ lượt xử lý của mình bằng một hệ thống riêng biệt, độc lập dùng để đo lường lượt xử lý nội dung. Chúng tôi thường xuyên kiểm tra nhiều số liệu độc lập như vừa nêu nhằm phát hiện ra những lỗi lớn trong cách tính toán.
Kiểm tra và gỡ lỗi công cụ đo lường
Chúng tôi tiến hành một loạt các đợt kiểm tra lấy mẫu ngẫu nhiên để xác minh độ chính xác của hệ thống đo lường ở tốc độ gần sát với thời gian thực. Điều này bao gồm việc kiểm tra các kết quả khác nhau diễn ra sau đó trong hệ thống của chúng tôi để xem xét kỹ lưỡng kết quả theo chiều ngược lại. Ví dụ: chúng tôi xác nhận rằng nội dung có kháng nghị cũng được ghi là nội dung bị xử lý vì nội dung phải bị xử lý thì mới có kháng nghị. Nhiều bước kiểm tra trong số này là nhằm xác định ra các lỗi lớn, chẳng hạn như nội dung có kháng nghị nhưng chưa từng bị gỡ.
Giống như tất cả các khía cạnh trong báo cáo thực thi tiêu chuẩn, chúng tôi sẽ tiếp tục phát triển và cải thiện quy trình đánh giá tính nhất quán và đúng đắn theo thời gian.
Quy trình đính chính và xem xét nội bộ
Chúng tôi cũng thiết lập các quy trình để xác định và đính chính thông tin mình đã chia sẻ trước đây trong báo cáo thực thi. Chúng tôi sẽ thường xuyên xem xét và cập nhật báo cáo này. Khi phát hiện thấy số liệu đã chia sẻ trong Báo cáo thực thi Tiêu chuẩn cộng đồng có thể có vấn đề, chúng tôi sẽ thực hiện các bước sau:
- Báo cáo. Nếu phát hiện thấy một vấn đề tiềm ẩn, đội ngũ của chúng tôi sẽ ngay lập tức gửi báo cáo vụ việc nhằm thông báo để các đội ngũ liên quan bắt đầu điều tra vấn đề đó.
- Điều tra và giảm thiểu ảnh hưởng. Các đội ngũ liên quan xem xét vấn đề tiềm ẩn, đưa ngay ra các thay đổi để ngăn chặn những vấn đề về tính nhất quán khác nếu cần và đề ra giải pháp để tránh vấn đề này trong tương lai
- Xác định quy mô của vấn đề. Các đội ngũ liên quan xem xét vấn đề tiềm ẩn, đưa ngay ra các thay đổi để ngăn chặn những vấn đề về tính nhất quán khác nếu cần và đề ra giải pháp để tránh vấn đề này trong tương lai.
- Xem xét rút kinh nghiệm từ vụ việc. Sau khi giảm thiểu ảnh hưởng của vấn đề, chúng tôi tiến hành đánh giá nội bộ một cách chi tiết để xác định nguyên nhân gốc rễ và toàn bộ tác động của vấn đề. Nhờ đó, chúng tôi xác định được các rủi ro lớn hơn ảnh hưởng đến tính đúng đắn của phương pháp đo lường để có thể ngăn chặn hoặc giảm thiểu.
Báo cáo các điểm điều chỉnh
Sau khi phát hiện ra vấn đề và điều chỉnh số liệu bị ảnh hưởng, chúng tôi sẽ đính chính công khai bằng cách cập nhật bài viết này vào thời điểm công bố Báo cáo thực thi Tiêu chuẩn cộng đồng tiếp theo. Trong trường hợp cập nhật như vậy, chúng tôi sẽ mô tả vấn đề, số liệu bị ảnh hưởng và khoảng thời gian chịu tác động. Dữ liệu cho các quý chịu ảnh hưởng trước đó trong chính Báo cáo thực thi Tiêu chuẩn cộng đồng sẽ bao gồm mọi số liệu đã điều chỉnh (nếu khả thi) để đảm bảo các phần so sánh theo thời gian sẽ có ý nghĩa.
Xin ý kiến đóng góp và mở rộng số liệu chúng tôi báo cáo
Ngoài công việc được thực hiện nội bộ để đánh giá và cải thiện số liệu, chúng tôi còn xin ý kiến đóng góp từ bên ngoài cho phương pháp của mình và mở rộng số liệu báo cáo để đưa ra bức tranh hoàn chỉnh hơn về những nỗ lực của chúng tôi trong việc thực thi chính sách.
Đánh giá phương pháp và xin ý kiến đóng góp
Để đảm bảo các phương pháp của mình minh bạch và dựa trên những nguyên tắc hợp lý, chúng tôi xin ý kiến đóng góp và dữ liệu phân tích của các chuyên gia trong lĩnh vực cụ thể về các khía cạnh như số liệu của chúng tôi có cung cấp thông tin hữu ích hay không.
Để đảm bảo phương pháp đo lường hoạt động thực thi đối với nội dung là có ý nghĩa và chính xác, chúng tôi hợp tác với Nhóm Tư vấn về Tính minh bạch của Dữ liệu DTAG (Data Transparency Advisory Group). Đây là một nhóm bên ngoài gồm các học giả quốc tế có chuyên môn trong lĩnh vực đo lường, thống kê, tội phạm học và quản lý. Vào tháng 05/2019, nhóm này đã cung cấp bản đánh giá công khai, độc lập về việc số liệu chúng tôi chia sẻ trong Báo cáo thực thi Tiêu chuẩn cộng đồng có đo lường phương thức chúng tôi thực thi chính sách theo cách chính xác và giàu ý nghĩa hay không, cũng như các thách thức chúng tôi gặp phải trong công việc này và những gì chúng tôi làm để khắc phục. Nói chung, họ thấy các số liệu của chúng tôi đo lường nội dung vi phạm theo phương thức hợp lý và tuân thủ cách làm tốt nhất. Họ cũng đưa ra một số đề xuất để chúng tôi có thể tiếp tục minh bạch hơn về công việc của mình. Chúng tôi đã thảo luận chi tiết và vẫn đang nghiên cứu các đề xuất này. Ngoài ra, vào năm 2021, Meta đã ủy thác cho một bên độc lập kiểm tra số liệu chia sẻ trong báo cáo này.
Xem Báo cáo thực thi Tiêu chuẩn cộng đồng mới nhất