Mạng nơ-ron không hiểu chữ số nào cả, nó chỉ nhân rồi cộng. Lưới 7×7 cho ra 49 con số đầu vào, mỗi nơ-ron lớp ẩn lấy tổng có trọng số cộng thêm độ lệch rồi đẩy qua hàm kích hoạt, bốn nơ-ron đầu ra ganh nhau điểm cao nhất và softmax biến điểm thành độ tự tin. Một nơ-ron đơn độc chỉ vạch được một đường thẳng nên bó tay trước XOR, phải có lớp ẩn hai nơ-ron ghép hai đường thẳng lại mới tách nổi. Cùng một tổng z, hàm kích hoạt đổi từ bậc thang sang sigmoid rồi sang ReLU cho ba dáng đáp ứng khác hẳn nhau.
Mạng nơ-ron không hiểu chữ số nào cả, nó chỉ nhân rồi cộng. Lưới 7×7 cho ra 49 con số đầu vào, mỗi nơ-ron lớp ẩn lấy tổng có trọng số cộng thêm độ lệch rồi đẩy qua hàm kích hoạt, bốn nơ-ron đầu ra ganh nhau điểm cao nhất và softmax biến điểm thành độ tự tin. Một nơ-ron đơn độc chỉ vạch được một đường thẳng nên bó tay trước XOR, phải có lớp ẩn hai nơ-ron ghép hai đường thẳng lại mới tách nổi. Cùng một tổng z, hàm kích hoạt đổi từ bậc thang sang sigmoid rồi sang ReLU cho ba dáng đáp ứng khác hẳn nhau.
Chủ đề liên quan trong Tư duy & Máy