Phân kỳ Kullback–Leibler

Trong toán học thống kê, phân kỳ Kullback–Leibler (hay còn gọi là khoảng cách Kullback–Leibler, entropy tương đối) là một phép đo cách một phân phối xác suất khác biệt so với cái còn lại, phân phối xác suất tham chiếu.[1][2] Các ứng dụng chứa đặc tính entropy thông tin quan hệ trong các hệ thống thông tin, ngẫu nhiên theo chuỗi thời gian liên tục, và thông tin đạt được khi so sánh các mô hình thống kê suy luận. Tương phản với sự thay đổi thông tin, phân kỳ Kullback–Leibler là một phép đo bất đối xứng phân phối thông minh và vì vậy không đủ điều kiện là một metric thống kê có tính lây lan. Trong trường hợp đơn giản, một phân kỳ Kullback–Leibler có giá trị 0 chỉ ra rằng hai phân phối là giống nhau. Nói cách đơn giản, phân kỳ Kullback–Leibler là một phép đo sự ngạc nhiên, với nhiều ứng dụng khác nhau như thống kê ứng dụng, cơ học chất lưu, khoa học thần kinhhọc máy.

Tham khảo

[sửa | sửa mã nguồn]
  1. ^ Kullback, S.; Leibler, R.A. (1951). "On information and sufficiency" (PDF). Annals of Mathematical Statistics. Quyển 22 số 1. tr. 79–86. doi:10.1214/aoms/1177729694. MR 0039968.
  2. ^ Kullback, S. (1959), Information Theory and Statistics, John Wiley & Sons. Republished by Dover Publications in 1968; reprinted in 1978: ISBN 0-8446-5625-9.

Liên kết ngoài

[sửa | sửa mã nguồn]
Chúng tôi bán
Bài viết liên quan
Lòng lợn – món ăn dân dã liệu có còn được dân yêu?
Lòng lợn – món ăn dân dã liệu có còn được dân yêu?
Từ châu Âu đến châu Á, mỗi quốc gia lại có cách biến tấu riêng với nội tạng động vật, tạo nên một bản sắc ẩm thực đặc trưng
Giới thiệu anime Golden Time
Giới thiệu anime Golden Time
Golden Time kể về những cuộc tình giữa những chàng trai và cô gái tại trường luật Tokyo
Nguồn gốc của mâu thuẫn lịch sử giữa hồi giáo, do thái và thiên chúa giáo
Nguồn gốc của mâu thuẫn lịch sử giữa hồi giáo, do thái và thiên chúa giáo
Mâu thuẫn giữa Trung Đông Hồi Giáo, Israel Do Thái giáo và Phương Tây Thiên Chúa Giáo là một mâu thuẫn tính bằng thiên niên kỷ và bao trùm mọi mặt của đời sống
Cẩm nang La Hoàn Thâm Cảnh 2.4 - Genshin Impact
Cẩm nang La Hoàn Thâm Cảnh 2.4 - Genshin Impact
Phiên bản 2.4 này mang đến khá nhiều sự thú vị khi các buff la hoàn chủ yếu nhắm đến các nhân vật đánh thường