ডিপসেকের নতুন চ্যাটবট একটি চিত্তাকর্ষক ভূমিকা নিয়ে গর্বিত: "হাই, আমি তৈরি হয়েছিল যাতে আপনি কিছু জিজ্ঞাসা করতে পারেন এবং এমন একটি উত্তর পেতে পারেন যা আপনাকে অবাক করে দিতে পারে।" এই এআই, চীনা স্টার্টআপ ডিপসেকের একটি পণ্য, দ্রুত একটি বড় বাজারের খেলোয়াড় হয়ে উঠেছে, এমনকি এনভিডিয়ার শেয়ারের দামের উল্লেখযোগ্য হ্রাসে অবদান রেখেছে। এর সাফল্য একটি অনন্য আর্কিটেকচার এবং প্রশিক্ষণ পদ্ধতি থেকে উদ্ভূত, বেশ কয়েকটি উদ্ভাবনী প্রযুক্তি অন্তর্ভুক্ত করে।
মাল্টি-টোকেন পূর্বাভাস (এমটিপি): traditional তিহ্যবাহী শব্দ-শব্দ-শব্দের পূর্বাভাসের বিপরীতে, এমটিপি একাধিক শব্দের পূর্বাভাস দেয়, বর্ধিত নির্ভুলতা এবং দক্ষতার জন্য বিভিন্ন বাক্য অংশ বিশ্লেষণ করে।
বিশেষজ্ঞদের মিশ্রণ (এমওই): এই আর্কিটেকচারটি ইনপুট ডেটা প্রক্রিয়া করতে, এআই প্রশিক্ষণকে ত্বরান্বিত করতে এবং কর্মক্ষমতা উন্নত করার জন্য একাধিক নিউরাল নেটওয়ার্ক ব্যবহার করে। ডিপসেক ভি 3 প্রতিটি টোকেন প্রসেসিং টাস্কের জন্য আটটি সক্রিয় করে 256 নিউরাল নেটওয়ার্ক নিয়োগ করে।
মাল্টি-হেডের সুপ্ত মনোযোগ (এমএলএ): এমএলএ গুরুত্বপূর্ণ বাক্য উপাদানগুলির উপর দৃষ্টি নিবদ্ধ করে, তথ্য হ্রাস হ্রাস করতে এবং সূক্ষ্ম সূক্ষ্মতাগুলি ক্যাপচার করতে বারবার পাঠ্য খণ্ডগুলি থেকে মূল বিবরণগুলি বের করে।
ডিপসেক প্রাথমিকভাবে তার শক্তিশালী ডিপসেক ভি 3 মডেলের জন্য কেবলমাত্র 2048 জিপিইউ ব্যবহার করে $ 6 মিলিয়ন ডলারের একটি উল্লেখযোগ্য কম প্রশিক্ষণ ব্যয় দাবি করেছিল। যাইহোক, সেমিয়ানালাইসিস আরও বেশি উল্লেখযোগ্য অবকাঠামো প্রকাশ করেছে: একাধিক ডেটা সেন্টারে বিতরণ করা প্রায় 50,000 এনভিডিয়া হপার জিপিইউ (10,000 এইচ 800, 10,000 এইচ 100, এবং অতিরিক্ত এইচ 20 জিপিইউ সহ) সহ। এটি প্রায় $ 1.6 বিলিয়ন এবং অপারেশনাল ব্যয়ের একটি সার্ভার বিনিয়োগকে অনুবাদ করে $ 944 মিলিয়ন ডলার।
চীনা হেজ ফান্ড হাই-ফ্লায়ারের সহায়ক সংস্থা ডিপসেক তার ডেটা সেন্টারের মালিক, মেঘের পরিষেবাগুলিতে নির্ভর করে এমন অনেকগুলি স্টার্টআপগুলির বিপরীতে। এটি অপ্টিমাইজেশন এবং দ্রুত উদ্ভাবন বাস্তবায়নের উপর আরও বেশি নিয়ন্ত্রণ সরবরাহ করে। সংস্থার স্ব-অর্থায়িত প্রকৃতি নমনীয়তা এবং সিদ্ধান্ত গ্রহণের গতি বাড়ায়। তদুপরি, ডিপসেক শীর্ষ প্রতিভা আকর্ষণ করে, কিছু গবেষক বার্ষিক $ 1.3 মিলিয়ন ডলার আয় করেন, প্রাথমিকভাবে শীর্ষস্থানীয় চীনা বিশ্ববিদ্যালয়গুলি থেকে নিয়োগ।
প্রাথমিক $ 6 মিলিয়ন চিত্র, ডিপসেক স্পষ্ট করে দেয়, কেবল গবেষণা, পরিমার্জন, ডেটা প্রসেসিং এবং সামগ্রিক অবকাঠামো বাদ দিয়ে প্রাক-প্রশিক্ষণ জিপিইউ ব্যয় প্রতিফলিত করে। এআই উন্নয়নে সংস্থার মোট বিনিয়োগ $ 500 মিলিয়ন ছাড়িয়েছে। এই যথেষ্ট বিনিয়োগ সত্ত্বেও, ডিপসিকের প্রবাহিত কাঠামো দক্ষ উদ্ভাবন বাস্তবায়নের অনুমতি দেয়।
ডিপসেকের সাফল্য একটি সু-অর্থায়িত স্বতন্ত্র এআই সংস্থার প্রতিযোগিতামূলক সম্ভাবনাকে হাইলাইট করে। যদিও "বিপ্লবী বাজেট" দাবিটি তর্কযোগ্যভাবে অতিরঞ্জিত, সংস্থার অর্জনগুলি অনস্বীকার্য, উল্লেখযোগ্য বিনিয়োগ, প্রযুক্তিগত অগ্রগতি এবং একটি শক্তিশালী দলের ফলস্বরূপ। প্রশিক্ষণ ব্যয়ের তুলনা করার সময় বিপরীতে সম্পূর্ণ: ডিপসেকের আর 1 এর ব্যয় $ 5 মিলিয়ন, যখন চ্যাটজিপিটি 4 এর জন্য একটি রিপোর্ট করা হয়েছে $ 100 মিলিয়ন ডলার-ডিপসেকের আপেক্ষিক ব্যয়-কার্যকারিতা হিসাবে বিবেচিত, এমনকি এটির সামগ্রিক বিনিয়োগের পরেও।
