Để thiết kế hệ học ta cần thự hiện các việc sau:

Chọn kinh nghiệm đào tạo (Choosing the training experience)

Việc chọn kinh nghiệm đào tạo có ảnh hưởng lớn tới sự thành công của hệ học.

Khi chọn cần quan tâm tới 3 tính chất chính của kinh nghiệm đào tạo:

1)      Kinh nghiệm đào tạo là loại có phản hồi trực tiếp hay gián tiếp tới hệ học (direct or indirect feedback).

Ví dụ như khi thiết kế hệ chơi cờ, hệ học có thể học từ các ví dụ đào tạo trực tiếp là các thế cờ có sẵn và nước đi đúng cho thế cờ đó, hoặc học từ kinh nghiệm gián tiếp như các chuỗi các nước đi và kết quả cuối cùng của từng chuỗi.

2)      Mức độ mà hệ học quản lý các ví dụ đào tạo.

Ví dụ: hệ học có thể dựa hoàn toàn vào thầy để chọn các thế cờ có sẵn và nước đi đúng cho mỗi thế cờ đó, hoặc hệ học tự sinh ra các thế cờ rồi hỏi thầy xem đi nước nào, hoặc thậm chí tự sinh ra các thế cờ và tự chọn nước đi thông qua những kinh nghiệm học được khi tự chơi với chính nó mà không cần thầy.

3)      Làm thế nào để phân bố thực hiện thí nghiệm dựa trên đánh giá độ đo đích thực P qua các độ đo trên thí dụ đào tạo. (Các nước đi qua thí nghiệm có thể không tốt vì chưa gặp đối thủ thực sự). Khi đó ta cần một số giả thiết bổ sung.

Chọn hàm đích:

Xác định tri thức cần học và cách chương trình sử dụng chúng sao cho tri thức học được cải thiện chất lượng thực hiện nhiệm vụ thể hiện qua độ đo P.

Chọn cách biểu diễn hàm đích:

Có rất nhiều cách biểu diễn hàm đích. Ví dụ với hệ chơi cờ, chúng ta có thể biểu diễn hàm đích dưới dạng 1 bảng dữ liệu mà mỗi hàng là một thế cờ và nước đi đúng cho thế cờ đó, hoặc có thể biểu diễn hàm đích bằng một bộ các luật, hoặc một hàm đa thức, một mạng noron nhân tạo,… Chọn thuật toán xấp xỉ hàm

Thiết kế cuối cùng.

 Thiết kế cuối cùng cho hệ học chơi cờ gồm 4 môđun chương trình chính trong hình 1.1

Hệ thực hiện. Lấy input là thế cờ được tạo ra và dùng hàm đích để xác định nước đi tiếp  qua đánh giá V (ngang) . Môđun bình luận. Nhờ theo dõi toàn bộ các ván ván chơi để ước lượng Vtrain cho các ví dụ Bộ tạo giả thuyết. Dùng các ví dụ đào tạo, đưa ra ước lượng tham số của hàm đích V   ( trong ví dụ này,nhờ quy tắc LMS) Bộ tạo thí nghiệm.  Tạo ra thế cò mới bắt đầu cuộc chới theo yêu cầu nào đó.