Xin chào và chào mừng đến với hướng dẫn này.
Được rồi, bây giờ đã đến lúc xây dựng AI đầu tiên của chúng tôi, bởi vì hiện tại chúng tôi mới chỉ
tạo sổ tay hướng dẫn với lớp AI, nhưng chúng tôi chưa tạo bất kỳ đối tượng nào.
Và vì vậy chúng tôi vẫn chưa có AI thực sự, nhưng chúng tôi sắp có được nó ngay bây giờ vì chúng
tôi sắp tạo ra một đối tượng của lớp AI này.
Và đối tượng này sẽ không là gì khác hơn là một AI sẽ có não và cơ thể.
Được rồi.
Vì vậy, chúng ta hãy làm điều này.
Nó thực sự rất đơn giản để làm điều đó bây giờ chúng ta đã xác định mọi thứ với các lớp.
Vì vậy, về cơ bản những gì chúng ta cần làm trước tiên là tạo ra một bộ não, vì như bạn có thể thấy, khi chúng ta tạo ra
một AI, chúng ta cần nhập một bộ não, nhưng chúng ta cũng nhập một cơ thể.
Vì vậy, chúng ta cũng cần phải tạo ra một cơ thể.
Và sau đó một khi chúng ta tạo ra một đối tượng não và một đối tượng cơ thể, chúng ta sẽ có thể tạo ra AI, nhưng đừng lo lắng,
chúng ta sẽ xây dựng bộ não và cơ thể trong một chiếc đèn pin.
Và thực sự, chúng ta hãy làm điều đó ngay bây giờ.
Hãy bắt đầu với bộ não.
Chúng ta sẽ gọi bộ não là CNN, bởi vì bộ não là một mạng nơ-ron phức tạp và
nó sẽ là một đối tượng của lớp CNN.
Vì vậy, nó là hợp lý để gọi nó là CNN.
Vì vậy, CNN bằng và sau đó chúng tôi tham gia lớp CNN của chúng tôi lần này và chúng tôi nhập vào dấu ngoặc đơn, theo bạn.
Chà, tại thời điểm này, khi chúng ta tạo một đối tượng của một lớp, những gì chúng ta phải
nhập rất đơn giản là đối số của hàm init và đó là các hành động số.
Và cảm ơn những gì chúng tôi đã làm trước đây khi sử dụng môi trường thu phóng,
nơi chúng tôi đã có các hành động số này và do đó chúng tôi chỉ cần nhập các hành động số ở đây vào lớp CNN.
Hoàn hảo.
Vì vậy, bây giờ chúng ta có bộ não.
Bây giờ chúng ta hãy làm bạn bè.
Chúng ta sẽ tạo một đối tượng thuộc lớp self max body và chúng ta sẽ gọi đối tượng
này là soft max body sẽ là phần thân của AI của chúng ta.
Và đối tượng này là một đối tượng của lớp soft max buddy mà chúng ta phải nhập đối số duy nhất của hàm init của lớp soft max
body, là nhiệt độ t và do đó ở đây chúng ta nhập t, nhưng chúng ta phải chỉ
định giá trị bởi vì cho đến nay t chỉ là một lập luận.
Vậy t bằng.
Và chúng ta sẽ bắt đầu với một nhiệt độ nhỏ, nhưng điều này có thể hoạt động rất tốt.
Và thực sự tôi đã biết điều này sẽ hoạt động rất tốt.
Vì vậy, nhưng bạn có thể thử với các nhiệt độ khác.
Bạn biết nó hoạt động như thế nào bây giờ hành động của bạn sẽ chắc chắn hơn về chính nó.
Nghĩa là, hành động có giá trị Q cao nhất sẽ có xác suất được chọn cao hơn so với các
hành động khác, hành động có xác suất được chọn thấp hơn và do đó sẽ ít được
khám phá hơn.
Nhưng dù sao đi nữa, chúng ta có thể bắt đầu với một cái.
Điều này sẽ giúp chúng ta có được một cơ thể tốt.
Được rồi.
Vì vậy, bây giờ chúng tôi có một bộ não, chúng tôi có một người bạn, vì vậy tôi đoán đã đến lúc vào chung kết.
Tôi cuối cùng.
Vì vậy, bây giờ bạn sẽ thấy mọi thứ sẽ trở nên đơn giản như thế nào.
Đó là khi trực giác đạt đến đỉnh cao.
Để tạo ra một AI, chúng ta chỉ cần tạo một đối tượng mà chúng ta gọi là mắt, tất nhiên là mắt từ lớp mắt của chúng ta.
Và vì mắt được cấu tạo bởi não và cơ thể, nên chúng ta nhập vào não, đó là
mạng lưới thần kinh phức hợp của chúng ta, nhưng đối tượng và cơ thể không gì khác ngoài phần thân mềm tối đa.
Vật thể từ lớp cơ thể của Mack mềm.
Và hãy xem, chúng tôi đã xây dựng một AI trong một chiếc đèn pin bằng cách chỉ nhập vào bộ não và cơ thể, và bây giờ chúng tôi đã có một
AI sẵn sàng được đào tạo.
Vì vậy, bây giờ đã đến lúc khởi động toàn bộ quy trình học tập phức tạp, sâu sắc với kinh nghiệm, phát
lại phần thưởng của dấu vết đủ điều kiện trên mười bước.
Và cuối cùng, khi chúng ta có tất cả những điều này, chúng ta sẽ đào tạo AI để làm cho nó trở nên thông minh.
Vì vậy, không thể chờ đợi để làm điều này.
Phần tiếp theo sẽ là về thiết lập tính năng phát lại trải nghiệm, vì vậy chúng tôi sẽ không
triển khai lại toàn bộ, như đối với xe tự lái, bởi vì tin tốt là chúng tôi đã triển khai nó.
Vì vậy, điều đó sẽ nhanh chóng.
Chúng tôi sẽ chỉ tạo một đối tượng tại lớp bộ nhớ phát lại nằm trong tệp phát lại trải nghiệm này.
Vì vậy, đó là điều giúp chúng tôi rất nhiều và do đó chúng tôi sẽ nhanh chóng chuyển sang những gì mới và quan trọng
nhất, đó là đào tạo.
Vì vậy, chúng ta hãy tấn công điều này trong các hướng dẫn tiếp theo và cho đến khi đó, hãy tận hưởng tôi.