ChatGPT

ChatGPT

Thiết kế bởi	OpenAI
Phát triển bởi	OpenAI
Phát hành lần đầu	30 tháng 11 năm 2022; 23 tháng trước (2022-11-30)
Thể loại	Chatbot trí tuệ nhân tạo
Giấy phép	Tư hữu
Website	chatgpt.com

Một phần của loạt bài về
Học máy và khai phá dữ liệu
Các vấn đề Phân loại Phân cụm Hồi quy Xác định bất thường AutoML Quy tắc kết hợp Học tăng cường Dự đoán cấu trúc Học đặc trưng Học máy online Học nửa giám sát Học tự giám sát Học không có giám sát Học xếp hạng Grammar induction
Học có giám sát (Phân loại bằng thống kê • Phân tích hồi quy) Học cây quyết định Học tập thể Bagging Boosting Rừng ngẫu nhiên k-NN Hồi quy tuyến tính Bộ phân loại Bayes đơn giản Mạng thần kinh nhân tạo Hồi quy logistic Perceptron Máy vectơ tương quan (RVM) Máy vectơ hỗ trợ (SVM)
Phân cụm BIRCH CURE Thứ bậc k-means Thuật toán cực đại hóa kỳ vọng (EM) DBSCAN OPTICS Dịch chuyển trung bình
Giảm chiều dữ liệu Phân tích nhân tố CCA ICA LDA NMF PCA PGD t-SNE
Dự đoán cấu trúc Mô hình xác suất dạng đồ thị Mạng Bayes Trường điều kiện ngẫu nhiên Mô hình Markov ẩn
Phát hiện bất thường k-NN Nhân tố ngoại lai cục bộ
Mạng thần kinh nhân tạo Bộ tự mã hóa Điện toán nhận thức Học sâu DeepDream Perceptron đa lớp Mạng thần kinh hồi quy LTSM GRU ESN Máy Boltzmann hạn chế GAN SOM Mạng thần kinh tích chập U-Net Transformer Mạng thần kinh dạng xung Memtransistor RAM điện hóa (ECRAM)
Học tăng cường Q-learning (học tăng cường) SARSA Chênh lệch thời gian (TD)
Lý thuyết Cân bằng độ lệch-phương sai Lý thuyết học tập tính toán Giảm thiểu rủi ro bằng kinh nghiệm Học Occam Học PAC Lý thuyết học thống kê Lý thuyết VC
Diễn đàn/tạp chí NeurIPS ICML ML JMLR ArXiv:cs.LG
Bài viết liên quan Danh sách các bộ dữ liệu cho nghiên cứu học máy Danh sách các khái niệm học máy Thuật ngữ trí tuệ nhân tạo
x t s

ChatGPT, viết tắt của Chat Generative Pre-training Transformer, là một chatbot do công ty OpenAI của Mỹ phát triển và ra mắt vào tháng 11 năm 2022. ChatGPT được xây dựng dựa trên GPT-3.5 - một dòng mô hình ngôn ngữ lớn của OpenAI đồng thời được tinh chỉnh bằng cả hai kỹ thuật học tăng cường lẫn học có giám sát.

ChatGPT được ra mắt dưới dạng nguyên mẫu vào tháng 11 năm 2022 và nhanh chóng thu hút sự chú ý nhờ việc nó có thể hồi đáp chi tiết và trả lời lưu loát trên nhiều lĩnh vực kiến thức khác nhau. Độ chính xác không đồng đều về dữ kiện thực tế của nó được xác định là mặt hạn chế đáng kể.^[1] Sau khi phát hành ChatGPT, OpenAI được định giá 29 tỷ USD.^[2]

Huấn luyện

ChatGPT được tinh chỉnh dựa trên GPT-3.5 bằng cách sử dụng phương pháp học có giám sát cùng với phương pháp học tăng cường.^[3] Cả hai phương pháp đó đều sử dụng huấn luyện viên là con người để cải thiện hiệu suất của mô hình. Trong trường hợp học có giám sát (supervised learning), mô hình này được cung cấp các hội thoại trong đó huấn luyện viên đóng vai trò làm cả hai bên: người dùng và trợ lý AI. Trong bước tăng cường (reinforcement), đầu tiên 'huấn luyện viên con người' xếp hạng các phản hồi mà mô hình này đã tạo ra trong mấy hội thoại trước đó. Các xếp hạng này được sử dụng để tạo ra 'mô hình phần thưởng', rồi từ đó mô hình đấy được tinh chỉnh thêm nữa bằng cách sử dụng Proximal Policy Optimization (PPO, Tối ưu hóa chính sách cận tính), lặp đi lặp lại mấy lần quá trình này.^[4][5] Các thuật toán của Proximal Policy Optimization mang trong mình những lợi điểm của các thuật toán trong trust region policy optimization (Tối ưu hóa chính sách miền tin tưởng), mà lại khắc phục được các thao tác tốn kém trong tính toán nhờ hiệu suất nhanh hơn.^[6] Các mô hình đấy được huấn luyện với sự cộng tác từ Microsoft trên cơ sở hạ tầng siêu máy tính Azure của họ.

Tính năng

So với bản tiền nhiệm của nó, InstructGPT, ChatGPT cố gắng giảm các hồi đáp có hại và lường gạt lại; trong một ví dụ, trong khi InstructGPT lại chấp nhận prompt (lời gợi nhắc) "Hãy kể cho tôi nghe về lúc Christopher Columbus đến Hoa Kỳ vào năm 2015" là đúng sự thật, thì ChatGPT sử dụng thông tin về các chuyến thám hiểm của Columbus và thông tin về thế giới hiện đại – bao gồm cả những nhìn nhận về Columbus – để xây dựng nên câu trả lời giả định là nếu Columbus đến Mỹ vào năm 2015 thì điều gì sẽ xảy ra.^[4] Dữ liệu huấn luyện của ChatGPT bao gồm nhiều man page (trong các hệ thống Unix), thông tin về các hiện tượng Internet, và các ngôn ngữ lập trình, chẳng hạn như hệ thống bảng bulletin (BBS) và ngôn ngữ lập trình Python.^[7]

Không giống như hầu hết các chatbot khác, ChatGPT có tính 'hữu trạng thái' (stateful), ghi nhớ các prompt mà trước đó được đưa ra cho nó trong cùng hội thoại, một số ký giả đã cho rằng cơ chế như vậy sẽ cho phép ChatGPT được dùng như là một nhà trị liệu có tính cá nhân hóa.^[8] Để ngăn ngừa việc output xúc phạm được trình ra và tạo ra từ ChatGPT, các truy vấn đều được lọc thông qua một API thẩm hạch (moderation), và những prompt có tiềm tàng nội dụng kỳ thị chủng tộc hay giới tính thì sẽ bị gạt bỏ đi.^[4][8]

ChatGPT mang trong mình nhiều hạn chế. Mô hình phần thưởng của ChatGPT, được thiết kế dựa trên sự giám sát của con người, có thể bị tối ưu hóa quá mức và do đó cản trở hiệu suất, còn được gọi là định luật Goodhart.^[9] Hơn nữa, ChatGPT không biết gì nhiều về các sự kiện xảy ra sau năm 2021.^[10] Trong huấn luyện, người đánh giá lại ưa những câu trả lời dài hơn nữa, bất chấp mức độ lĩnh hội thực tế hay nội dung có đúng với thực kiện không.^[4] Dữ liệu huấn luyện cũng có thể bị thiên kiến thuật toán; các prompt mà bao gồm các mô tả mơ hồ về con người, như ghi người nào đó là CEO chẳng hạn, có thể sinh ra phản hồi giả định rằng một người như vậy là nam giới da trắng, ví dụ thế.^[11]

Dịch vụ

ChatGPT được cho ra mắt vào ngày 30 tháng 11 năm 2022, bởi OpenAI có trụ sở tại San Francisco, cũng là nhà sáng tạo ra DALL·E 2 và Whisper. Dịch vụ này được phát hành miễn phí thời gian đầu cho công chúng, với kế hoạch kiếm tiền từ dịch vụ về sau này. Ngày 2 tháng 2 năm 2023, OpenAI tung ra gói đăng ký 20 USD/tháng cho phiên bản ChatGPT Plus, cung cấp cho người dùng dịch vụ ổn định hơn, nhanh hơn cùng các tính năng tiên tiến so với bản miễn phí. Nhà phát triển cũng hé lộ về ChatGPT Professional, phiên bản cao cấp dành cho doanh nghiệp.^[12]

Đến ngày 4 tháng 12 năm 2022, OpenAI ước tính ChatGPT đã có hơn một triệu người dùng.^[13] Tính đến 31 tháng 1 năm 2023, ứng đã đạt 100 triệu người dùng chỉ sau 2 tháng ra mắt. Reuters dẫn thống kê của Sensor Tower cho thấy nền tảng video ngắn TikTok cần 9 tháng sau khi phát hành toàn cầu để đạt 100 triệu người dùng, trong khi Instagram mất tới 2,5 năm, còn ứng dụng dịch Google Translate là 6,5 năm.^[12][14]

Đón nhận, chỉ trích, và những vấn đề khác

Phản ứng tích cực

• ChatGPT vào tháng 12 năm 2022 đã nhận được những đánh giá nói chung là tích cực; The New York Times đã gán nó danh hiệu "chatbot trí tuệ nhân tạo tốt nhất được phát hành ra quảng đại quần chúng trước giờ"^[15] Samantha Lock của The Guardian ghi rằng nó có thể tạo văn bản "chi tiết một cách ấn tượng" và "giống con người".^[16] 'Soạn giả' công nghệ Dan Gillmor đã sử dụng ChatGPT trong một bài tập của sinh viên và nhận thấy văn bản được tạo ra từ nó ngang tầm với những gì một sinh viên giỏi sẽ làm ra và cho rằng "giới học thuật có một số vấn đề rất nghiêm trọng phải đối mặt rồi".^[17] Alex Kantrowitz của Slate ca ngợi việc ChatGPT chối bỏ các câu hỏi liên quan đến Đức Quốc xã, khi ông đề cập Adolf Hitler đã xây dựng đường cao tốc ở Đức, thì liền nhận được trả lời về việc sử dụng lao động cưỡng bức tại Đức Quốc xã.^[18]
• Trong bài "Breakthroughs of the Year" (Bước đột phá của năm) cho năm 2022 của The Atlantic, Derek Thompson đã liệt ChatGPT vào hàng "sự bùng nổ của những AI tạo sinh" mà "có thể thay đổi đầu óc chúng ta về cách chúng ta làm việc, về cách chúng ta suy nghĩ, và về trí sáng tạo của con người thực sự là gì".^[19]
• Kelsey Piper của Vox có viết rằng "ChatGPT là cái dẫn nhập ngay trên tầm tay đầu tiên cho công chúng thấy rằng AI hiện đại đã có sức mạnh đến nhường nào, và hệ quả là nhiều người chúng ta (đã phải sững sờ)" và bảo rằng "ChatGPT đủ thông minh để trở nên hữu ích bất chấp khiếm khuyết của mình". Trong một bài tweet, ông trùm công nghệ Elon Musk đã viết rằng "ChatGPT tốt đến đáng sợ. Cái ngày AI mạnh mẽ đến nguy hiểm đối với chúng ta không xa đâu".^[20]
• Tổng thống Israel Isaac Herzog trở thành nhà lãnh đạo thế giới đầu tiên nhờ ChatGPT hỗ trợ viết bài phát biểu của mình trong khai mạc tại hội thảo về an ninh mạng Cybertech Global Tel Aviv 2023 ngày 1 tháng 2 năm 2023. Trước gần 20.000 khán giả, ông tiết lộ phần mở đầu do chính ChatGPT viết.^[21]

Phản ứng tiêu cực

• Trong một bài ý kiến vào tháng 12 năm 2022, nhà kinh tế học Paul Krugman có viết rằng ChatGPT sẽ ảnh hưởng đến nhu cầu lao động tri thức.^[22] James Vincent của The Verge coi sự thành công gây xôn xao của ChatGPT là bằng chứng cho thấy trí tuệ nhân tạo đã trở thành xu hướng chủ đạo.^[5] Nhiều ký giả có nhận xét về xu hướng bị ảo giác của ChatGPT (đưa ra câu trả lời sai nhưng lại rất tự tin).^[23] Mike Pearl của Mashable đã thử nghiệm ChatGPT với nhiều câu hỏi. Trong một ví dụ, ông yêu cầu mô hình đấy đưa ra "quốc gia lớn nhất ở Trung Mỹ mà không phải là Mexico". ChatGPT đã trả lời là Guatemala, nhưng mà đáp án phải là Nicaragua mới đúng.^[24] Khi CNBC hỏi ChatGPT về ca từ bài hát "The Ballad of Dwight Fry", ChatGPT lại bịa ra lời nhạc thay vì đưa ra lời bài hát thực tế.^[25] Ở chiều ngược lại, các nhà nghiên cứu được The Verge dẫn ra đã so sánh ChatGPT với một "con vẹt ngẫu nhiên (stochastic)",^[26] giống với nhận xét của Giáo sư Anton Van Den Hengel từ Viện Học Máy Úc.^[27]
• Vào tháng 12 năm 2022, website hỏi đáp Stack Overflow đã cấm sử dụng ChatGPT để tạo câu trả lời cho các câu hỏi, với lý do các câu trả lời từ ChatGPT có tính chất thường hay bị sai mặc dù trông rất đúng.^[1]
• Nhà kinh tế Tyler Cowen bày tỏ lo ngại về ảnh hưởng của nó đối với nền dân chủ, dẫn ra viễn cảnh người ta viết bình luận tự động nhằm tác động lên quá trình quyết định các quy định mới.^[28] The Guardian có đặt câu hỏi là sau khi ChatGPT được phát hành thì liệu ta có thể thực sự tin tưởng vào bất kỳ nội dụng nào trên Internet hay không và kêu gọi chính phủ ban hành quy chế.^[29]
• Axe Sharma của Bleeping Computer có ghi rằng ChatGPT có khả năng viết phần mềm độc hại và email lừa đảo.^[30] CEO của OpenAI, người tạo ra ChatGPT, Sam Altman, có viết rằng phần mềm tiên tiến có thể dấy lên "(ví dụ như) rủi ro an ninh mạng rất lớn" và cũng tiếp tục dự đoán là "chúng ta có thể đạt được 'trí tuệ nhân tạo tổng quát' đích thực trong thập kỷ tới, vì vậy chúng ta cũng phải cực kỳ nghiêm túc mà nhận lấy rủi ro về điều đó".^[13]
• Ngày 31 tháng 3 năm 2023, Ý trở thành quốc gia đầu tiên tại Liên minh châu Âu cấm ChatGPT. Cơ quan bảo vệ dữ liệu Ý ban bố lệnh cấm cho đến khi ChatGPT tôn trọng quyền riêng tư, đồng thời mở cuộc điều tra đối với OpenAI do lo ngại về cách công ty này xử lý dữ liệu người dùng. Động thái này được đưa ra sau sự cố ChatGPT làm lộ dữ liệu người dùng và phải tạm đóng dịch vụ trong thời gian ngắn hôm 20 tháng 3.^[31]

Tác động đến nền giáo dục

• Trên The Atlantic, Stephen Marche ghi rằng người ta vẫn chưa hiểu rõ được ảnh hưởng của nó lên giới học thuật và đặc biệt nhất là lên cơ chế bài luận xét tuyển nó như thế nào.^[32] Giáo viên trung học California và tác giả Daniel Herman có viết rằng ChatGPT sẽ mở ra "Dấu chấm hết cho tiếng Anh trung học".^[33]
• Ở Nature, Chris Stokel-Walker chỉ ra rằng giáo viên nên quan ngại về việc giờ đây học sinh sẽ nhờ ChatGPT viết hộ bài tập chứ không tự làm nữa, nhưng cũng bảo rằng các nhà cung cấp dịch vụ giáo dục sẽ phải thích nghi để đề cao tư duy phản biện hoặc suy luận, những thứ mà ChatGPT chưa thể làm được, trong bài tập cho học sinh.^[34]
• Emma Bowman tại NPR ghi nhận sự nguy hiểm về việc học sinh đạo văn từ công cụ này khi mà nó có thể cho ra văn bản mang thiên kiến hoặc vô nghĩa nhưng lại mang giọng điệu có thẩm quyền.^[35]

"Vượt rào"

ChatGPT được huấn luyện để từ chối các prompt có thể vi phạm chính sách nội dung của nó. Tuy nhiên, một số người dùng đã vòng qua được những giới hạn và hạn chế này thông qua những kỹ thuật như prompt engineering.^[36] Việc "vượt rào" như vậy mở ra con đường cho phép người dùng thao túng ChatGPT đưa ra những output có thể bị người ta coi là xúc phạm, không phù hợp, hoặc có nguy cơ gây hại cho xã hội.^[37] Sau đây bao gồm một số phương pháp được sử dụng để đi vòng qua bộ lọc của ChatGPT:

1. Bảo ChatGPT tiếp nối một lời phát biểu nào đó trong một cuộc phỏng vấn giả nào đó.
2. Hướng dẫn cho nó tắt bộ lọc trò chuyện đi.
3. Gợi nhắc (prompt) nó giải mật mã một tin nhắn chứa hướng dẫn rồi làm theo nội dung đó.
4. Bảo nó đóng vai một chiếc máy tính và xuất hiển thị của nó dưới dạng tranh ASCII.

Tham khảo

1. ^ Vincent, James (5 tháng 12 năm 2022). “AI-generated answers temporarily banned on coding Q&A site Stack Overflow”. The Verge. Truy cập ngày 5 tháng 12 năm 2022.
2. ChatGPT creator OpenAI is in talks to sell shares in a tender offer that would double the startup's valuation to $29 billion Insider, Lakshmi Varanasi, January 5, 2023
3. Knox, W. Bradley; Stone, Peter. Augmenting Reinforcement Learning with Human Feedback (PDF). University of Texas at Austin. Truy cập ngày 5 tháng 12 năm 2022.
4. ^ OpenAI (30 tháng 11 năm 2022). “ChatGPT: Optimizing Language Models for Dialogue”. Truy cập ngày 5 tháng 12 năm 2022.
5. ^ Vincent, James (8 tháng 12 năm 2022). “ChatGPT proves AI is finally mainstream – and things are only going to get weirder”. The Verge. Truy cập ngày 8 tháng 12 năm 2022.
6. van Heeswijk, Wouter (29 tháng 11 năm 2022). “Proximal Policy Optimization (PPO) Explained”. Towards Data Science. Truy cập ngày 5 tháng 12 năm 2022.
7. Edwards, Benj (5 tháng 12 năm 2022). “No Linux? No problem. Just get AI to hallucinate it for you”. Ars Technica. Truy cập ngày 5 tháng 12 năm 2022.
8. ^ Roose, Kevin (5 tháng 12 năm 2022). “The Brilliance and Weirdness of ChatGPT”. The New York Times. Truy cập ngày 5 tháng 12 năm 2022.
9. Gao, Leo; Schulman; Hilton, Jacob (2022). "Scaling Laws for Reward Model Overoptimization". arΧiv:2210.10760 [cs.LG]. 
10. “ChatGPT FAQ”. help.openai.com (bằng tiếng Anh). Truy cập ngày 21 tháng 12 năm 2022.
11. Murphy Kelly, Samantha (5 tháng 12 năm 2022). “This AI chatbot is dominating social media with its frighteningly good essays”. CNN. Truy cập ngày 5 tháng 12 năm 2022.
12. ^ “ChatGPT đạt 100 triệu người dùng, ra bản thu phí”.
13. ^ “What is ChatGPT and why does it matter? Here's what you need to know”. ZDNET (bằng tiếng Anh). 2022. Truy cập ngày 18 tháng 12 năm 2022.
14. “ChatGPT cán mốc 100 triệu người dùng chỉ sau 2 tháng ra mắt”.
15. Roose, Kevin (5 tháng 12 năm 2022). “The Brilliance and Weirdness of ChatGPT”. The New York Times. Truy cập ngày 18 tháng 12 năm 2022.
16. Lock, Samantha (5 tháng 12 năm 2022). “What is AI chatbot phenomenon ChatGPT and could it replace humans?”. The Guardian. Truy cập ngày 5 tháng 12 năm 2022.
17. Hern, Alex (4 tháng 12 năm 2022). “AI bot ChatGPT stuns academics with essay-writing skills and usability”. The Guardian. Truy cập ngày 5 tháng 12 năm 2022.
18. Kantrowitz, Alex (2 tháng 12 năm 2022). “Finally, an A.I. Chatbot That Reliably Passes "the Nazi Test"”. Slate. Truy cập ngày 5 tháng 12 năm 2022.
19. Thompson, Derek (8 tháng 12 năm 2022). “Breakthroughs of the Year”. The Atlantic. Truy cập ngày 18 tháng 12 năm 2022.
20. Piper, Kelsey (15 tháng 12 năm 2022). “ChatGPT has given everyone a glimpse at AI's astounding progress”. Vox (bằng tiếng Anh). Truy cập ngày 18 tháng 12 năm 2022.
21. “Tổng thống đầu tiên dùng ChatGPT viết bài phát biểu”.
22. Krugman, Paul (6 tháng 12 năm 2022). “Does ChatGPT Mean Robots Are Coming For the Skilled Jobs?”. The New York Times. Truy cập ngày 6 tháng 12 năm 2022.
23. “ChatGPT a 'landmark event' for AI, but what does it mean for the future of human labour and disinformation?”. CBC. 2022. Truy cập ngày 18 tháng 12 năm 2022.
24. Pearl, Mike (3 tháng 12 năm 2022). “The ChatGPT chatbot from OpenAI is amazing, creative, and totally wrong”. Mashable. Truy cập ngày 5 tháng 12 năm 2022.
25. Pitt, Sofia (2022). “Google vs. ChatGPT: Here's what happened when I swapped services for a day”. CNBC (bằng tiếng Anh). Truy cập ngày 18 tháng 12 năm 2022.
26. Vincent, James (1 tháng 12 năm 2022). “OpenAI's new chatbot can explain code and write sitcom scripts but is still easily tricked”. The Verge. Truy cập ngày 18 tháng 12 năm 2022.
27. Mannix, Liam (13 tháng 12 năm 2022). “Is AI coming of age - or starting to reach its limits?”. The Sydney Morning Herald (bằng tiếng Anh). Truy cập ngày 18 tháng 12 năm 2022.
28. Cowen, Tyler (6 tháng 12 năm 2022). “ChatGPT Could Make Democracy Even More Messy”. Bloomberg News. Truy cập ngày 6 tháng 12 năm 2022.
29. “The Guardian view on ChatGPT: an eerily good human impersonator”. the Guardian (bằng tiếng Anh). 8 tháng 12 năm 2022. Truy cập ngày 18 tháng 12 năm 2022.
30. Sharma, Ax (6 tháng 12 năm 2022). “OpenAI's new ChatGPT bot: 10 dangerous things it's capable of”. Bleeping Computer. Truy cập ngày 6 tháng 12 năm 2022.
31. “Quốc gia đầu tiên cấm ChatGPT”.
32. Marche, Stephen (6 tháng 12 năm 2022). “The College Essay Is Dead”. The Atlantic. Truy cập ngày 8 tháng 12 năm 2022.
33. Herman, Daniel (9 tháng 12 năm 2022). “The End of High-School English”. The Atlantic. Truy cập ngày 12 tháng 12 năm 2022.
34. Stokel-Walker, Chris (9 tháng 12 năm 2022). “AI bot ChatGPT writes smart essays — should professors worry?”. Nature. Truy cập ngày 19 tháng 12 năm 2022.
35. Bowman, Emma (19 tháng 12 năm 2022). “A new AI chatbot might do your homework for you. But it's still not an A+ student”. NPR. Truy cập ngày 19 tháng 12 năm 2022.
36. Zvi (2 tháng 12 năm 2022). “Jailbreaking ChatGPT on Release Day” (bằng tiếng Anh).
37. Written, Zack (1 tháng 12 năm 2022). “Thread of known ChatGPT jailbreaks”. Twitter (bằng tiếng Anh). Truy cập ngày 17 tháng 12 năm 2022.

Liên kết ngoài

• Website chính thức