Các khái niệm cơ bản trong lý thuyết thông tin (entropy, thông tin tương hỗ). Chuỗi mã hóa. Thuật toán nén không mất mát. Lý thuyết mã sửa lỗi .