ห้องปฏิบัติการจีนได้เปิดตัวหนึ่งในโมเดล AI แบบ "เปิด" ที่ทรงพลังที่สุดจนถึงปัจจุบันที่เรียกว่า DeepSeek V3 พัฒนาโดยบริษัท AI ชื่อ DeepSeek ซึ่งเปิดตัวเมื่อวันพุธภายใต้ใบอนุญาตอนุญาต ทำให้นักพัฒนาสามารถดาวน์โหลดและแก้ไขเพื่อใช้ในหลายวัตถุประสงค์ รวมถึงการใช้งานเชิงพาณิชย์ DeepSeek V3 มีความสามารถโดดเด่นในงานที่ใช้ข้อความหลายอย่าง เช่น การเขียนโค้ด การแปล และการเขียนเรียงความหรืออีเมลจากคำบอก ภายใต้การทดสอบภายในของ DeepSeek โมเดลนี้มีประสิทธิภาพดีกว่าทั้งโมเดลดาวน์โหลด "เปิด" และโมเดลปิดที่เข้าถึงได้ผ่าน API เท่านั้น ในการแข่งขันเขียนโปรแกรมบน Codeforces แพลตฟอร์มสำหรับการแข่งขันการเขียนโปรแกรม DeepSeek มีประสิทธิภาพเหนือกว่าโมเดลอื่นๆ รวมถึง Llama 3. 1 405B ของ Meta, GPT-4o ของ OpenAI และ Qwen 2. 5 72B ของ Alibaba นอกจากนี้ยังทำคะแนนดีในแบบทดสอบ Aider Polyglot ซึ่งออกแบบมาเพื่อประเมินว่าโมเดลสามารถเขียนโค้ดใหม่ที่ผสานรวมกับโค้ดที่มีอยู่ได้หรือไม่ DeepSeek V3 ถูกฝึกฝนด้วยชุดข้อมูลกว่า 14. 8 ล้านล้านโทเค็น ในวิทยาศาสตร์ข้อมูล โทเค็นแสดงถึงชิ้นส่วนของข้อมูลดิบ โดยที่ 1 ล้านโทเค็นเทียบเท่ากับประมาณ 750, 000 คำ โมเดลนี้ยังมีขนาดใหญ่มาก โดยมีพารามิเตอร์ 671 พันล้าน (หรือ 685 พันล้านบนแพลตฟอร์มนักพัฒนา AI Hugging Face) ซึ่งเป็นตัวแปรภายในที่โมเดลใช้ในการตัดสินใจ ขนาดนี้มีมากกว่าขนาดของ Llama 3. 1 405B ที่มีพารามิเตอร์ 405 พันล้านพารามิเตอร์ถึง 1. 6 เท่า โดยทั่วไป โมเดลที่มีพารามิเตอร์มากกว่าอาจทำงานได้ดีกว่า แต่ก็ต้องการฮาร์ดแวร์ที่ทรงพลังเพื่อให้ทำงานได้อย่างมีประสิทธิภาพ DeepSeek V3 ที่ยังไม่ได้รับการปรับแต่งต้องการชุดของ GPU คุณภาพสูงเพื่อให้ได้ความเร็วที่เหมาะสม แม้ว่ามันอาจจะไม่สะดวกใช้นัก DeepSeek V3 ก็ถือเป็นความสำเร็จ DeepSeek ใช้เวลาฝึกฝนโมเดลนี้ประมาณสองเดือนด้วยศูนย์ข้อมูลของ Nvidia H800 GPUs ซึ่งบริษัทจีนเพิ่งถูกสหรัฐฯ สั่งห้ามไม่ให้ซื้อมา บริษัทอ้างว่าใช้เงินเพียง 5. 5 ล้านเหรียญในการฝึกฝน DeepSeek V3 ซึ่งเป็นเพียงเสี้ยวหนึ่งของต้นทุนของโมเดลอย่าง GPT-4 ของ OpenAI อย่างไรก็ตาม มุมมองทางการเมืองของโมเดลมีข้อจำกัดบางประการ เช่น จะไม่แสดงความคิดเห็นเกี่ยวกับเรื่องจัตุรัสเทียนอันเหมิน ในฐานะบริษัทจีน DeepSeek ต้องถูกควบคุมโดยกฎระเบียบทางอินเทอร์เน็ตจีน ทำให้การตอบสนองของโมเดลสนับสนุน "ค่านิยมสังคมนิยมหลัก" AI ระบบจีนหลายแห่งหลีกเลี่ยงหัวข้อที่อาจทำให้ผู้ควบคุมไม่พอใจ เช่น การอภิปรายเกี่ยวกับระบอบ Xi Jinping DeepSeek ซึ่งเพิ่งเปิดตัว DeepSeek-R1 เป็นคู่แข่งกับโมเดล o1 “reasoning” ของ OpenAI เป็นองค์กรมหัศจรรย์ และได้รับการสนับสนุนจาก High-Flyer Capital Management กองทุนเฮดจ์ฟันด์จีนที่ใช้ AI ในการซื้อขาย High-Flyer สร้างคลัสเตอร์เซิร์ฟเวอร์ของตัวเองสำหรับฝึกโมเดล หนึ่งในนั้นมีรายงานว่ามี GPU Nvidia A100 10, 000 ตัวและมีค่าใช้จ่าย 1 พันล้านเยน (~138 ล้านเหรียญ) ก่อตั้งโดย Liang Wenfeng ซึ่งสำเร็จการศึกษาด้านวิทยาการคอมพิวเตอร์ High-Flyer มุ่งหวังที่จะบรรลุ AI ที่ "superintelligent" ผ่าน DeepSeek Wenfeng ในการสัมภาษณ์เมื่อต้นปีนี้กล่าวว่า AI แบบปิดอย่าง OpenAI เป็นเพียงข้อได้เปรียบชั่วคราว “[มัน] ยังไม่หยุดให้ผู้อื่นตามทัน” เขากล่าวการณ์ และดูเหมือนจะเป็นเช่นนั้นจริงๆ