DeepSeek bao gồm DeepSeek-R1 và DeepSeek V3. Trong đó, DeepSeek V3 là Mô hình Ngôn Ngữ Lớn (LLM) là nền tảng để train nên mô hình DeepSeek R1 là Mô Hình Tư Duy Lý Luận (Reasoning Model). Các mô hình ngôn ngữ AI này mã nguồn mở, đến từ Trung Quốc, đã mở ra hướng đi mới về training AI ưu tiên học tăng cường (Reinforcement Learning – RL) thay vì phụ thuộc vào dữ liệu gán nhãn (Supervised Fine-Tuning – SFT).
Xem thêm Vì sao DeepSeek lại gây chấn động thế giới?
DeepSeek là gì?
Mô hình AI DeepSeek R1 được phát triển bởi DeepSeek, một công ty khởi nghiệp mới ra đời cách đây một năm. R1 gần như có thể sánh ngang với khả năng của các đối thủ nổi tiếng hơn nhiều như GPT-4 của OpenAI và Gemini của Google, nhưng với chi phí phát triển chỉ bằng một phần nhỏ.
Để hiểu rõ hơn về DeepSeek AI, xin mời các bạn tham khảo bài viết của tác giả Hong Phuc Nguyen, link gốc tại đây.
DeepSeek AI: sự trỗi dậy của AI phương đông hay AI Trung Quốc có thực sự đe doạ phương tây?
Hôm nay mọi người trên thế giới bắt đầu nói về con AI mới mạnh hơn ChatGPT của OpenAI Mỹ và NÓ-MIỄN-PHÍ và đến từ … Trung Quốc 
tên DeepSeek. Ứng dụng iOS tên DeepSeek AI Assistant hiện đứng top 1 ứng dụng hot vượt qua ChatGPT, và đang gây ra một thứ gọi là “Thời Khắc ChatGPT” (ChatGPT Moment – kiểu quào AI vãi lúa kinh vậy) một lần nữa sau 2 năm kể từ khi ChatGPT lan khắp thế giới và đánh dấu sự khởi đầu của cuộc cách mạng AI. Cái quái gì đang xảy ra vậy ?
Là một người nghiên cứu khoa học Machine Learning nhiều năm và đang phát triển kinh doanh AI trên nhiều thị trường, mình có kinh nghiệm để giải thích một chút về những gì đang xảy ra để giáỉ đáp một chút thắc mắc trên. Bài sẽ hơi dài và có phần khoa học nếu bạn tò mò để coi lúc chờ giao thừa :))))))
Phần dành cho bình dân tò mò AI: DeepSeek hơn gì ChatGPT mà nó gây quào kinh vậy?
Đầu tiên, nó là … ChatGPT :))), ChatGPT đã trở thành danh từ chung để gọi AI dạng Chatbot suốt trong 2 năm qua 
nên mình dùng từ này để mô tả về con AI DeepSeek nhé, tức DeepSeek AI nó là cái App AI Chatbot mà bạn tải về smartphone của bạn và chat với AI y chang cái App ChatGPT. Tóm lại nó là một AI Chatbot dùng được ở trên điện thoại smartphone, hoặc dùng thông qua web deepseek ai, bạn chat hỏi nó, và nó trả lời
Điều đầu tiên là giống, và đây là những thứ khác…
NÓ MIỄN PHÍ NGAY TỪ ĐẦU, vâng DeepSeek cho free ngay từ đầu một con AI có chất lượng tương đương ChatGPT Plus hay Gemini Advanced 50$ :))))) Một chiêu quá quen thuộc của anh em Trung Hoa khi giới thiệu sản phẩm, công thức cho free – gồng lỗ để thu hút users ban đầu cho đông :))))) từ từ bào chúng nó (users) sau :)))))
Nó có khả năng Tư Duy Suy Luận (Self-Reasoning) rất tốt, một trong những cấp độ thông minh của AI mà mãi tới năm vừa rồi OpenAI mới làm được và diếm như mèo giấu mứt mãi mới dám đưa ra cộng đồng sử dụng – nhưng vẫn rất giới hạn số lượt sử dụng. Mình sẽ nói về đột phá khoa học của con AI DeepSearch Reasoning 1 (R1) này ở phần khoa học phía dưới. Tóm lại là con AI này có khả năng Tư Duy Suy Luận nên nó Khôn-Vãi-Mứt, Khôn hơn cả conAI cấp độ Nghiên Cứu Sinh Tiễn Sĩ của OpenAI là O1 luôn , chưa so được với con AI cấp độ tiến sĩ O3 do bọn OpenAI vẫn dấu như mèo dấu mứt nên lấy gì mà so.
Đặc biệt, nó open-source (open một phần – chỉ open cho tải Mô Hình), dĩ nhiên với người bình dân thì cái khái niệm này đếch quan trọng lắm, free là vui rồi :))) nhưng bình tĩnh, hãy nhớ một điểm thôi, khi một AI Open-Source (Mở Mã Nguồn) thì có nghĩa là bạn sẽ được xài free hoặc rẻ rất rẻ mãi mãi, không thằng này free thì có thằng khác tải về, cài đặt rồi dựng thành AI free cho bạn xài. Nói chung an tâm là kiểu mie gì nó cũng free hoặc rất rẻ, mãi mãi :))))
Vậy đó, nó hot chỉ bởi vậy thôi, đã ngon mà còn free lại còn là AI thứ đang thời thượng ai cũng cần nữa, thì nó ếu hót thì cái gì hót ???
Phần dành cho người muốn hiểu rõ tại sao Mỹ lo sợ trước AI DeepSeek, cơ hội cho VN từ AI DeepSeek?
Douma hôm nay 1000 tỉ đô đã bay khỏi thị trường chứng khoán Mỹ do DeepSeek đạp đám cổ phiếu Big Tech xuống lỗ :)))))))
Lí do là các nhà đầu tư đang đặt câu hỏi to bự: bọn Big Tech US năm vừa rồi đã đốt 200 tỉ đô cho hạ tầng AI (chủ yếu mua card của Nvidia) có thực sự đáng tiền hay ko ? hay bọn nó đang đốt tiền ngu ? hay bọn nó đang bùa các cổ đông ?
Thằng DeepSeek của China mới hô là tụi nó clone OpenAI chỉ với 5 triệu đô thôi kìa 1/100 so với tụi OpenAI và Microsoft đã đầu tư để train AI 
Thú vị là cổ phiếu rớt đậm sâu nhất là cổ … NVIDIA (NVDA) :))))) lí do là thằng DeepSeek hô chỉ cần 1/100 số card để train AI mà còn là card cùi (H800) chứ không phải card xịn nhứt (H100) của NVDA nữa :)))) thế thì tất cả các khoản đầu tư dự kiến mua 1.5 triệu con card như META của Mắc giờ phải tạm ngưng lại ngay để đánh giá xem có thể tiết kiệm không. Thế thì anh Nvidia đi bụi chứ gì :)))))) card cùi của ảnh đang tồn ở kênh phân phối vô cùng nhiều với hàng cũ (gaming) từ thời crypto còn đầy ra kìa :)))))
Nghe trên X đồn là Trung tâm nghiên cứu AI của Facebook (FAIR) mấy ngày vừa qua khá hỗn loạn khi ban quản trị META chửi bẹt đội kỹ sư vì DeepSeek base trên LLaMA nhưng phí train rẻ hơn. Đội kỹ sư thì đang mổ xẻ model DeepSeek cũng như paper để gấp rút sao chép được gì thì sao chép :)))))
Nói chung là mấy ông Mỹ và Phương Tây panic cmnl trong mấy ngày qua vì ông DeepSeek AI Trung Quốc :)))))
Dĩ nhiên một số tiếng nói tỉnh táo nói ngược lại, điển hình là anh Alexandr Wang CEO gốc Trung của Scale AI, công ty chuyên làm dữ liệu huấn luyện thuê cho các cty train AI, khách của ảnh là OpenAI, Anthropic, Google và dĩ nhiên cả mấy cty TQ như Alibaba, Tencent, rồi cả … cty mẹ của DeepSeek là quỹ đầu tư High-Flyer (thuê Scale AI làm data cho mô hình AI tài chính). Anh này trong một buổi phỏng vấn có nói là (hình dưới còm): DeepSeek có tầm 50.000 con GPU NVIDIA H100 lận mà tụi nó không nói được do tụi nó sở hữu không chính thức vì bị Mỹ cấm vận mà.
Cá nhân mình trong vài tháng trước có chia sẻ cho mọi người rằng các cty AI Trung Quốc đã và đang thuê GPUs xịn từ các hạ tầng cho thuê GPUs cloud xịn xò ở các nước chung quanh. Ví dụ thuê GPUs của cty con GreenNode của VNG Việt Nam tại Thái Lan, thuê đám GPUs mà FPT nhập về kìa :))))) dự kiến thuê đám GPUs mà NVIDIA cung cấp cho Trung Tâm Dữ Liệu và Trung Tâm Nghiên Cứu AI ở Việt Nam :))) các thông tin này mai mình sẽ share full clip buổi nói chuyện cách đây vài tháng tại trường đầu tư Candela cho mọi người nghe thêm. Chuyện DeekSeek hôm nay thực ra giới làm AI đã dự đoán trước, chỉ là không biết nó sớm vậy thôi :)))))
Doanh số bán card năm 2024 của Nvidia tới 1/4 là tới các cty datacenter offshore cho TQ tại Singapore :)))))
Nên bảo Trung Quốc không có card xịn để train AI là câu chuyện gimmick marketing của mấy anh China kể để nghe nó kiểu Vượt-Nghèo-Học-Giỏi thôi trong khi mấy anh TQ có thiếu quái gì tiền, nghèo thì phải nói VN mới là nghèo kìa :)))))
Làm AI có 2 giai đoạn, giai đoạn Training và giai đoạn Inference (chạy model), thực tế về mặt khoa học và kỹ thuật thì giai đoạn Training hoàn toàn có thể sử dụng GPUs on Cloud tức là xài remote bất cứ đâu trên thế giới được, thuê tầm vài trăm ngàn con xài trong vài tháng để train rồi ngưng, chi phí trả 1 cục, không vấn đề, do mạng mẽo không cần phải mạnh phải liên tục.
Nhưng giai đoạn Inference tức là chạy model và cung cấp dịch vụ AI cho mọi người chat public thì mệt mỏi hơn, số card không thể dự đoán trước mà users tăng bao nhiêu thì số card thuê phải tăng bấy nhiêu, mạng mẽo phải liên tục, phải nhanh, chứ chậm vài giây users chửi liền. Do đó phần tốn tiền kinh khủng là phần Inference chứ không phải phần Training, chi phí Training nó có thể dự đoán trước. Nên việc thuê GPUs tại các cloud offshore là rất khó khăn trong việc planning chi phí cũng như resources. Đông Users cái là biết nhau ngay, một trong số lí do DeepSeek phải Open Source là bởi cty mẹ High-Flyer không nhiều tiền như Microsoft và OpenAI để cung cấp free mãi con AI này đâu. Vì chi phí thuê GPUs cho Inference quá cao nếu trong tình trạng bị cấm vận như TQ nên mới có cái deal anh Jasen Huang sếp Nvidia qua Việt Nam lập Trung Tâm Dữ Liệu AI và Trung tâm Nghiên Cứu AI đó :)))))) do mạng VN và Trung Quốc khác éo gì mạng Local đâu, mạng VN qua quốc tế thì ngon nhất ĐNÁ luôn, và ship card từ Đài Loan qua VN thì thôi rồi nó gần :))))) Này nói thêm vì nó liên quan với vụ DeepSeek ra mắt thực ra có lợi cho VN hơn :)))))
Nói tiếp, mình cũng từng chia sẻ là việc Mỹ cấm vận GPU hiệu suất cao đối với TQ đã khiến TQ đi một con đường nguy hiểm hơn mà Mỹ không kiểm soát được, đó là tận dụng phong trào AI nguồn mở mà Meta của Mắc dẫn đầu để phát triển các mô hình AI Nguồn Mở Quy Mô Nhỏ (Small Language Model) được chuyên biệt hoá chức năng, và sử dụng được trên các thiết bị AI ở Local như dùng card GPU gaming RTX là đủ chạy hoặc chạy được trên mấy con Raspberry Pi hoặc chạy được trên điện thoại có chip NPU (Neural Processing Unit – chip chạy AI yếu hơn GPU nhưng vẫn chạy ổn). Sếp của Trung tâm AI Facebook (FAIR) giáo sư Yann LeCun có post cái tút confirm về ý này khi DeepSeek bùng nổ, DeepSeek sử dụng mô hình nguồn mở LLaMA của Meta cho việc huấn luyện AI DeepSeek.
Người Trung Quốc từ lúc mở cửa năm 1978 đến nay, luôn tập trung vào việc “làm sao để sản xuất lớn nhanh nhất nhiều nhất”, trái ngược với người Mỹ, là làm sao để pump market cap lên maximum có thể tức là khai mở thị trường lên đến cực hạn. Đây chính là điểm khiến Mỹ phải thương chiến với TQ, nghĩ coi mình thì lo mở rộng thị trường, nhưng thằng lòi bên kia đại dương chỉ chăm chăm lo ăn sao cho lớn vô miếng bánh mà mình mất công mở :))))) cáu vl :))))
Nên anh Trump mới cấm vận TQ, rồi cấm vận chip đối với TQ, mục tiêu là để ép và ngăn TQ cắn vô thị trường mà mấy anh Mỹ tốn công mở mà chưa kịp ăn. Âu là do bản chất cách làm ăn mấy trăm năm nay của 2 đế quốc thôi.
DeepSeek thể hiện rõ lối làm ăn theo hướng tập trung tối ưu đó của TQ ngay từ cách thức tổ chức công ty, team DeepSeek có dưới 200 người, nghề chính lại còn không phải là làm AI, mà là cty con của Cty quản lý quỹ đầu tư kỹ thuật (Quant Fund) High-Flyer, đám làm AI này dùng đám card thừa khi cty mẹ xài chạy mấy model financial xong thì xài, đặc biệt là team này ếu có ông PhD nào nữa, nhân sự cốt cán của team toàn là cử nhân thôi, lại còn đến từ các trường đại học chả phải top đầu như Thanh Hoa hay Bắc Đại nữa :))) Nên sản phẩm DeepSeek AI của họ dĩ nhiên là hướng tới tối ưu ngay từ đầu, chi phí sao cho rẻ nhất, bán được đại trà nhất, cắn vô to nhất miếng bánh AI mà người Mỹ đã pump lên 800% chỉ trong 2 năm.
Tóm lại nói dông dài về mặt kinh tế, tài chính và địa chính trị, để nói rõ tổng quan rằng người Mỹ đã ép người Trung Quốc tới điểm “cùng tất biến” 
nên DeepSeek là kết quả nhãn tiền của chính sách o ép từ Mỹ thôi
Dù mình làm cho cty AI Mỹ nhưng mình cũng ếu ưa cái chính sách cấm vận chip này của Mỹ mỗi lần train model AI phải connect qua GPUs farm của cty bên Mỹ khổ bỏ mie 
Phần dành cho người muốn hiểu rõ đột phá khoa học của AI DeepSeek, cơ hội kiếm tiền từ AI DeepSeek?
Về mặt khoa học Mô Hình AI DeepSeek v3 và DeepSeek R1 thực sự có các đột phá rất hiệu quả về mặt công nghệ và kinh tế. Đặc biệt là mở ra cơ hội cho các cty nhỏ và các nước nghèo tham gia vào sân chơi AI, ngang cơ với các đại tập đoàn công nghệ đang bơm thổi thị trường AI.
DeepSeek V3 là Mô hình Ngôn Ngữ Lớn (LLM) là nền tảng để train nên mô hình DeepSeek R1 là Mô Hình Tư Duy Lý Luận (Reasoning Model)
1. Mô hình nhỏ (Small Language Model) nhưng hiệu quả cao!
DeepSeek là mô hình sử dụng cấu trúc Mixture-of-Experts (MoE) tức là trong 1 Mô hình AI chứa nhiều Mô hình AI nhỏ (mỗi AI nhỏ gọi là Chuyên Gia, được huấn luyện riêng biệt có chức năng kiến thức riêng biệt) , nên kích thước tổng của DeepSeek là 671B Tỉ Tham Số là AI Rất TO nhưng thực tế lúc chạy chỉ có 37B Tỉ Tham Số tức phần thực sự chiếm bộ nhớ của GPUs lại chỉ là AI nhỏ, tỉ lệ expert trên tổng kích thước là 1/18 , một tỉ lệ rất đáng kinh ngạc vì thông thường tỉ lệ này ở các mô hình AI khác dùng MoE trung bình tầm 1/7 thôi. Chứng tỏ DeepSeek đã đẩy kỹ thuật Mixture-of-Experts tới một ngưỡng mới, trước đó mấy mô hình AI khác mà dùng MoE mỗi lần hỏi AI phải gọi lên rất đông ông experts. Kỹ thuật MoE không phải kỹ thuật mới, GPT-4 bản chất đã là mô hình 1000B tỉ tham số nhưng theo kiến trúc MoE với tỉ lệ gọi expert trên tổng tham số là 1/3 lận
Trên paper của DeepSeek cũng nói rằng họ có kiến trúc MoE riêng gọi là DeepSeekMoE, kiến trúc này tiết kiệm bộ nhớ vì nó có những ông là Shared Expert tức là ổng có Kiến Thức Chung của 2 nhóm khác nhau nên khi User hỏi những câu hỏi cần kiến thức đến từ nhiều ông Expert thì mấy ông Expert chung này giúp tiết kiệm bộ nhớ so với 1 ông Expert kiến thức riêng rẽ :))))) Có một số tối ưu về thuật toán routing nên gọi ông Expert nào lên nữa, tóm lại DeepSeekMoE giúp Mô Hình To nhưng chạy như Mô Hình Nhỏ, nên hiệu suất là của Mô Hình To trong khi xài tài nguyên thì như Mô Hình Nhỏ. Bạn đọc paper DeepSeekMoE để hiểu rõ hơn nha, khá hay đó.
2. Tiết kiệm GPUs vRAM
vRAM của GPUs thực tế là thứ luôn bị thiếu, những nhà khoa học huấn luyện AI luôn thiếu nhất là thiếu vRAM do đặc tính của mô hình AI là gia tăng mức độ chiếm dụng vRAM theo theo cấp số mũ (quadratic), nên mấy ông làm AI phải mua mấy con card GPUs đắt đỏ của Nvidia, càng đắt thì vRAM càng cao, card H100 tới 80GB ram lận , bọn Nvidia rất khốn nạn khi chúng nó rất tiết kiệm vRAM gắn trên card dù chúng có thể làm nhiều hơn, nhưng éo, làm tiền max khung luôn Các nhà khoa học nghèo ở những nước bị cấm vận mua GPU xịn của Nvidia như Trung Quốc, hay Việt Nam đều rất khó khăn với việc có thêm vRAM để chạy AI hay huấn luyện AI
Do đó DeepSeek đã tiến một bước đột phá nữa khá xa trong việc tiết kiệm vRAM phải dùng bằng việc phát minh ra thuật toán Multi-Head Latent Attention cách mạng so với thuật toán Attention gốc mà Google phát minh ra lúc đưa ra thuật toán Transformer huyền thoại tạo nên LLM hiện nay đó, cách mạng hơn cả thuật toán Flash-Attention (cũng của Google phát minh) mà các mô hình AI hiện nay dùng để tiết kiệm bộ nhớ vRAM.
Giải thích dễ hiểu kỹ thuật này là họ phát minh ra một thuật toán giúp nén dữ liệu kiến thức của Mô Hình AI :))))) hay chưa :)))
Bản thân AI Model đã là sự nén kiến thức rồi, nhưng họ còn tìm ra cách nén tốt hơn nữa, nén nhỏ hơn 1/4 so với kích thước gốc , giảm tới gần 80% bộ nhớ vRAM phải sử dụng lận
Hai cái đột phá về công nghệ ở trên đều được DeepSeek giới thiệu từ 8 tháng trước, chúng là sự chuẩn bị cho sự ra đời của mô hình DeepSeek R1 làm mưa làm gió 3 hôm nay
Đây là 2 kỹ thuật chính khiến cho chi phí huấn luyện AI của DeepSeek thật sự rẻ hơn so với OpenAI, Google hay bất kỳ ông làm mô hình AI nào hiện nay của Mỹ. Cốt lõi là tiết kiệm vRAM thôi :))) tiết kiệm được vRAM thì có thể mua card rẻ hơn thay vì phải mua card đắt vốn khó mua nữa, chưa kể còn có thể tận dụng đám card cũ nữa :)))) nên DeepSeek mới có thể nhẹ nhàng thổi bay 10% (600 tỉ đô) giá trị của Nvidia chỉ trong 1 ngày, cái mà nhà đầu tư NVDA sợ nhất là bọn làm AI không mua card mới nữa mà đi mua card cũ về chạy AI :)))) bể mie cái mô hình kinh doanh card dựa trên vRAM ít và đắt đỏ của anh Jesen Huang rồi.
Dĩ nhiên, bạn có thể làm toán một chút để thấy rằng so với mô hình AI khác thì DeepSeek giảm trung bình khoảng 50-60% số lượng vRAM sử dụng
Vậy chi phí phần cứng huấn luyện AI maybe có thể giảm tương ứng con số 50-60% so với mô hình khác :))))))
Tới đây thì cá nhân mình cho rằng con số 5 triệu đô huấn luyện DeepSeek R1 so với 100 triệu đô huấn luyện OpenAI GPT-4 tức giảm tới 95% chi phí thì nó … hơi xạo xạo kiểu dựng chuyện con nhà nghèo học giỏi nên nó đáng được ngưỡng mộ mấy anh TQ thì hay quá lời kiểu này mà
3. Kỹ thuật huấn luyện AI Tư Duy Lý Luận rất đột phá
Paper của model DeepSeek R1 mô tả rõ quy trình huấn luyện R1 rất đột phá.
Đầu tiên, DeepSeek bắt đầu huấn luyện Reasoning luôn bằng kỹ thuật Reinforcement Learning (RL) luôn chứ không dùng kỹ thuật Supervised Learning (SL)
Giải thích dễ hiểu là các bên khác huấn luyện năng lực Reasoning cho AI thì bắt đầu bằng việc thuê cty Scale AI rồi cty này thuê người về, rồi những người này sẽ Viết Ra: Mẫu-Câu Hỏi-Mẫu Tư Duy Lý Luận-Mẫu Câu Trả Lời . Viết tầm vài trăm ngàn mẫu rồi lấy vài trăm ngàn mẫu này đi training AI :)))) tức là AI sẽ học từ con người Dĩ nhiên chi phí thuê người viết mấy trăm ngàn mẫu này nó mắc chứ không rẻ, vì bọn người mà viết được Tư Duy Lý Luận từng bước một cách khúc chiết rõ ràng trước khi trả lời thì bọn đấy có học hành cao ấy
Nên DeepSeek mới làm luôn là prompt cho mô hình LLM DeepSeek V3 trực tiếp thử “Thinking-Step-by-Step” viết ra từng bước suy nghĩ trước khi trả lời, rồi lập trình một thuật toán lựa ra các câu trả lời mà Mô hình AI LLM DeepSeek V3 sinh ra hay nhất, có các bước Tư Duy Lý Luận Rõ Ràng Khúc Chiết Nhất, thì đánh điểm cao và thưởng cho AI (Reward Model), dần dần AI DeepSeek học được cách Reasoning một cách hiệu quả MÀ KHÔNG CẦN CON NGƯỜI DẠY.
Và như thế vẫn chưa hết cái hay, trong quá trình DeepSeek tự dạy mình học Reasoning nó đã TỰ NHẬN THỨC ĐƯỢC việc phải TỰ ĐÁNH GIÁ LẠI Lý Luận Mà Nó Đã Viết rồi TỰ CHỈNH SỬA NẾU THẤY NÓ KHÔNG HỢP LOGIC !!!
Đây được giới khoa học AI gọi là Aha Moment :)))) còn giới chuyên gia kol thì gào lên là “Bỏ Mẹ Rồi AI Tự Nhận Thức Tự Sửa Lỗi Được Rồi, Skynet comingggggggg” :))))
Sau khi huấn luyện xong mô hình DeepSeek V3 có năng lực Reasoning gọi là DeepSeek R1-Zero thì DeepSeek nhận ra là mô hình này reasoning thì hay nhưng nó không biết kết luận nên đưa ra câu trả lời trớt qướt dù reasoning rõ hay :)))))
Nên DeepSeek bắt đầu fine-tuning mô hình R1-Zero hướng vô một số nhóm nghành cụ thể như Toán, Khoa Học, Logic, Viết Code, Lập Trình … để câu trả lời nó thực tế hơn. VÀ họ có sử dụng con người tham gia đánh giá câu trả lời từ AI để tối ưu câu trả lời sao cho con người đọc hiểu được :)))) đây rõ ràng là kỹ thuật Re-inforcement Learning by Human Feedback (RLHF) rất truyền thống để huấn luyện AI LLM.
Nên chỗ này họ có tiết kiệm chi phí thuê người tham gia quá trình huấn luyện đấy nhưng vẫn phải chi, không nhiều thôi :))))
4. Sử dụng dữ liệu tổng hợp (Synthetic Data) từ OpenAI
DeepSeek không nói trong paper nhưng giới khoa học AI đã tìm ra các manh mối rằng DeepSeek sử dụng dữ liệu sinh ra bởi AI của OpenAI để hỗ trợ cho quá trình huấn luyện bằng kỹ thuật RLHF. Do để tiết kiệm chi phí nên số người tham gia feedback-loop để kiểm định và điều chỉnh câu trả lời của AI DeepSeek trong giai đoạn cuối của việc huấn luyện là không nhiều, nên DeepSeek có sử dụng lượng lớn dữ liệu Hỏi-Đáp sinh ra từ AI của OpenAI để điều chỉnh câu trả lời của mô hình sau công đoạn Reasonin, giúp câu trả lời “thật hơn” như … OpenAI GPT :)))))
Thậm chí ở phrase đầu khi cho mô hình AI tự học kỹ thuật Reasoning thì DeepSeek đã sử dụng dữ liệu tổng hợp từ LLaMA của Meta để làm prompt chỉ dẫn cho DeepSeek V3 có thể tự sinh chuỗi Reasoning.
Tóm lại DeepSeek dùng dữ liệu tổng hợp để giảm chi phí làm dataset training cho AI. Nhưng cái hay là họ chứng minh luận điểm rằng dùng AI dạy AI sẽ làm mô hình AI bị thoái hoá và ngu đi thay vì khôn lên LÀ SAI :)))))
5. Họ cung cấp Open Source luôn mô hình DeepSeek R1
Đây không phải đột phá kỹ thuật nhưng đột phá về mặt kinh doanh. Khi họ cho open source mô hình DeepSeek R1 thì họ mở ra hẳn một business ecosystem mới xoay quanh mô hình DeepSeek mà họ cung cấp, mọi người có thể tải mô hình về, mua card hay thuê card từ Nvidia để chạy AI DeepSeek. DeepSeek sẽ không phải tốn chi phí vận hành hạ tầng khổng lồ để cung cấp API cho mọi người như các mô hình đóng như OpenAI, Google hay Anthropic.
NHƯNG nếu bạn muốn chỉnh sửa mô hình DeepSeek R1 hoặc sao chép nó thì không
DeepSeek không cung cấp chi tiết về cách tạo Dataset – tức dữ liệu huấn luyện nên DeepSeek V3 và R1
DeepSeek không cung cấp chi tiết về thuật toán Group Relative Policy Optimization (GRPO) và các thuật toán liên quan dùng để đánh giá câu trả lời reasoning của AI
Trong ngành AI, dataset và các thuật toán dùng trong quá trình training mới là key turning point.
Không có chúng bạn không thể sao chép hoặc fine-tune mô hình DeepSeek R1 đạt hiệu quả như DeepSeek đang làm.
Soon thôi, DeepSeek sẽ bán các dịch vụ xoay quanh các mô hình Open Source này như fine-tuning…
Nên mình mới nói là DeepSeek open-source chỉ 1 phần thôi, không hẳn là fully open-source đâu
Kiếm tiền từ DeepSeek AI
DeepSeek đem lại cho chúng ta một mô hình AI nhỏ vừa đủ và chất lượng rất tốt, có thể vận hành trên các GPUs thương mại ít vRAM, cá nhân hay doanh nghiệp nhỏ có thể mua được.
Đây chính là điểm đăc biệt, chúng ta có thể tận dụng DeepSeek V3 và R1 để cung cấp các dịch vụ Local AI
DeepSeek rất khéo khi cung cấp cho chúng ta một số mô hình R1 phiên bản nhỏ xíu 1B,7B,8B,14B,32B,70B là dạng thu nhỏ từ các mô hình AI nguồn mở khác như Qwen của Alibaba, LLaMA của Meta.
Các mô hình nhỏ xíu này thậm chí chạy trược trên điện thoại hay máy tính laptop bình thường của bạn :))))
Đây chính là điểm bùng nổ các Sản phẩm & Dịch vụ Ứng dụng AI chạy Local với DeepSeek AI đặc biệt là AI Agent sẽ dễ dàng triển khai hơn khi có năng lực Reasoning của DeepSeek R1
Cuối tháng 2 tới Conductify AI sẽ cung cấp khoá học tạo AI Agent cho Cá Nhân và hệ thống chạy AI Agent Local ngay trên máy tính của bạn sử dụng DeepSeek R1
Thời AI Agent chạy đầy đường tới rồi !!! cám ơn người anh em Trung Hoa DeepSeek AI :))))))))
