Xác suất và Thống kê
Thống kê mô tả
Tóm tắt dữ liệu bằng các đại lượng như trung bình, trung vị, độ lệch chuẩn, và trình bày bằng biểu đồ.
Trực giácTrực giác: Kể câu chuyện của dữ liệu bằng vài con số
Hãy tưởng tượng một giáo viên có 30 điểm kiểm tra, hoặc một chủ cửa hàng có doanh số một tháng theo từng ngày. Không ai muốn nhìn chằm chằm vào 30 con số riêng lẻ để hiểu chuyện gì đã xảy ra. Thống kê mô tả nén cả một bộ dữ liệu thành một vài con số — một giá trị điển hình, mức độ phân tán của các giá trị — để ta có thể so sánh, tóm tắt và phát hiện điều bất thường chỉ bằng một cái nhìn.
Phổ thôngĐo trung tâm: Trung bình, Trung vị, Mốt
Định nghĩa: Trung bình
Trung bình (hay số trung bình) của giá trị dữ liệu là tổng của tất cả chúng chia cho số lượng giá trị. Nó dùng đến mọi giá trị trong bộ dữ liệu, nên nhạy cảm với các giá trị bất thường lớn hoặc nhỏ.
Ở đây là trung bình, là số lượng giá trị dữ liệu, và là giá trị thứ được cộng vào. Dấu gạch ngang trên là ký hiệu chuẩn cho "trung bình của ".
Định nghĩa: Trung vị và Mốt
Trung vị là giá trị ở giữa khi dữ liệu được sắp xếp từ nhỏ đến lớn (hoặc trung bình của hai giá trị giữa, nếu chẵn). Mốt là giá trị xuất hiện nhiều lần nhất. Không giống trung bình, trung vị bỏ qua việc các giá trị cực trị cách xa bao nhiêu — chỉ thứ hạng của chúng mới quan trọng — điều này khiến nó chống chịu được với giá trị ngoại lai.
Vậy nên dùng đại lượng nào? Nếu dữ liệu tương đối đối xứng và không có giá trị cực trị, trung bình hiệu quả và dùng hết mọi thông tin. Nếu dữ liệu có giá trị ngoại lai hoặc bị lệch nặng — như thu nhập hộ gia đình hay giá nhà — trung vị cho một giá trị "điển hình" đại diện hơn.
| Đại lượng | Định nghĩa | Có nhạy với ngoại lai? |
|---|---|---|
| Trung bình | Tổng các giá trị chia cho số lượng | Có — mọi giá trị đều được tính |
| Trung vị | Giá trị ở giữa khi đã sắp xếp | Không — chỉ thứ hạng quan trọng |
| Mốt | Giá trị xuất hiện nhiều nhất | Không |
Phổ thôngĐo độ phân tán: Độ lệch chuẩn và Tứ phân vị
Hai bộ dữ liệu có thể có cùng trung bình nhưng trông hoàn toàn khác nhau — một bộ tập trung chặt chẽ, một bộ phân tán rộng. Độ lệch chuẩn nắm bắt điều này bằng cách đo khoảng cách điển hình của một giá trị dữ liệu tới trung bình:
Mỗi độ lệch được bình phương (để độ lệch âm và dương không triệt tiêu nhau), lấy trung bình, rồi căn bậc hai đưa đơn vị trở về thang đo gốc của dữ liệu. nhỏ nghĩa là dữ liệu tập trung chặt quanh ; lớn nghĩa là nó phân tán rộng.
Tứ phân vị chia dữ liệu đã sắp xếp thành bốn phần bằng nhau: (đi được 25% chặng đường), trung vị (50%), và (75%). Khoảng tứ phân vị đo độ phân tán của nửa giữa dữ liệu và, giống trung vị, chống chịu được giá trị ngoại lai — đây chính xác là điều một biểu đồ hộp vẽ ra: một hộp từ đến với một đường tại trung vị.
Với mọi bộ dữ liệu có trung bình , .
Vì sao đúng?
Trung bình được định nghĩa chính xác như điểm cân bằng của dữ liệu — hãy nghĩ tới một bập bênh với các quả cân tại mỗi — nên các giá trị trên trung bình phải cân bằng chính xác với các giá trị dưới nó, nếu không đã không phải là điểm cân bằng.
Chứng minh
Khai triển tổng bằng cách phân phối: . Tổng thứ hai cộng hằng số với chính nó lần, nên .
Theo định nghĩa, , nên nhân cả hai vế với ta được . Đây chính xác là cùng đại lượng với tổng thứ nhất trong khai triển ở trên.
Thay lại, , điều này chứng minh khẳng định.
Nếu một bộ dữ liệu mới được tạo bởi với các hằng số , thì và độ lệch chuẩn mới là .
Vì sao đúng?
Dịch mỗi điểm dữ liệu cùng một lượng sẽ dịch trung bình đi cùng lượng đó nhưng không thay đổi mức độ phân tán tương đối giữa các điểm; nhân mỗi điểm với sẽ nhân cả trung bình và độ phân tán với (dùng vì độ phân tán không thể âm).
Chứng minh
Với trung bình: , dùng và .
Với độ phân tán, trước tiên chú ý : độ dịch hằng số triệt tiêu hoàn toàn, chỉ còn lại độ lệch đã được nhân lên.
Bình phương rồi lấy trung bình, . Lấy căn bậc hai hai vế cho , vì căn bậc hai luôn không âm.
Phổ thôngỨng dụng thực tiễn và Ví dụ minh họa
Thống kê mô tả có mặt khắp nơi: một nhà phân tích thể thao so sánh trung bình đánh bóng với trung bình toàn giải, một nhà máy theo dõi độ lệch chuẩn của kích thước chi tiết để phát hiện vấn đề chất lượng, một cơ quan thời tiết báo cáo lượng mưa trung vị vì một năm lũ lụt duy nhất sẽ làm méo trung bình, và một công ty báo cáo doanh thu theo quý cùng với một giá trị điển hình và một thước đo biến động.
Ví dụ: Một giá trị ngoại lai làm lệch trung bình
Một gia sư ghi lại 6 điểm kiểm tra: . Ở bài kiểm tra cuối, một lỗi nhập liệu thay bằng . So sánh trung bình và trung vị trước và sau lỗi này.
Lời giải
Trước lỗi: trung bình là , và sắp xếp dữ liệu cho trung vị (trung bình của hai giá trị giữa). Trung bình và trung vị khá gần nhau.
Sau lỗi, dữ liệu trở thành . Trung bình giờ là — bị kéo lên rất cao bởi một giá trị sai duy nhất.
Dữ liệu đã sắp xếp vẫn là , nên trung vị vẫn là , hoàn toàn không bị ảnh hưởng. Đây chính xác là lý do trung vị được ưa chuộng khi bộ dữ liệu có thể chứa lỗi nhập liệu hoặc giá trị ngoại lai cực đoan.
Ví dụ: So sánh độ ổn định bằng độ lệch chuẩn
Hai cầu thủ ghi điểm trong 5 trận. Cầu thủ A: . Cầu thủ B: . Cả hai có cùng trung bình, nhưng cầu thủ nào ổn định hơn? Tính độ lệch chuẩn của mỗi người để so sánh.
Lời giải
Cả hai bộ dữ liệu đều có trung bình : với A, ; với B, .
Với cầu thủ A, độ lệch so với là , bình phương tổng lại là , nên phương sai là và độ lệch chuẩn là .
Với cầu thủ B, độ lệch là , bình phương tổng lại là , nên phương sai là và . Vì , cầu thủ A ghi điểm ổn định hơn nhiều dù cả hai đều trung bình điểm mỗi trận.
Tính trung bình của bộ dữ liệu .
Đại lượng đo xu hướng trung tâm nào ít bị ảnh hưởng nhất bởi một giá trị ngoại lai cực đoan duy nhất trong dữ liệu?
Với bộ dữ liệu , độ lệch chuẩn bằng bao nhiêu?
Một biểu đồ hộp của thời gian giao hàng (phút) cho thấy và . Khoảng tứ phân vị bằng bao nhiêu?
Tài liệu tham khảo
- David Freedman, Robert Pisani, Roger Purves (2007). Statistics
- David S. Moore, William I. Notz (2020). The Basic Practice of Statistics