એનવીડિયાની એચ 800 માર્ચ 2023 માં શરૂ કરવામાં આવી હતી અને તે એચ 100 નું કટ-ડાઉન સંસ્કરણ છે તે એનવીડિયાના એચ 200 અને એએમડીની વૃત્તિ શ્રેણી કરતા નોંધપાત્ર રીતે ધીમું છે, આ કૃત્રિમ અવરોધને કારણે ડીપસીકની એન્જિનિયરિંગને નવીન કરવાની ફરજ પડી છે
તે વ્યાપકપણે માનવામાં આવ્યું હતું કે યુનાઇટેડ સ્ટેટ્સ વૈશ્વિક એઆઈ મહાસત્તા તરીકે બિનસલાહભર્યા રહેશે, ખાસ કરીને રાષ્ટ્રપતિ ડોનાલ્ડ ટ્રમ્પની પ્રોજેક્ટ સ્ટારગેટની તાજેતરની ઘોષણા પછી – યુ.એસ.માં એઆઈ ઇન્ફ્રાસ્ટ્રક્ચરને પ્રોત્સાહન આપવાની billion 500 અબજ ડોલરની પહેલ. જો કે, આ અઠવાડિયે ચીનના ડીપસીકના આગમન સાથે સિસ્મિક પાળી જોવા મળી હતી. તેના અમેરિકન હરીફોની કિંમતના અપૂર્ણાંક પર વિકસિત, ડીપસીક ક્યાંયથી મોટે ભાગે ઝૂલતો બહાર આવ્યો અને તેણે યુએસ ટેક સ્ટોકના બજાર મૂલ્યથી 1 ટ્રિલિયન ડોલરનો નાશ કર્યો, એનવીઆઈડીઆઈએ મુખ્ય અકસ્માત સાથે.
દેખીતી રીતે, ચીનમાં વિકસિત કંઈપણ ખૂબ ગુપ્ત બનશે, પરંતુ ટેક પેપર ચેટ મ model ડેલને સ્તબ્ધ કરતા થોડા દિવસો પહેલા પ્રકાશિત એ.આઇ. નિરીક્ષકો અમને ચાઇનાની સમકક્ષ ચાઇનીઝને ચલાવે તે તકનીકીની થોડી સમજ આપે છે.
2022 માં, યુ.એસ.એ એ.આઇ. ટેકનોલોજી પર નિયંત્રણ કડક બનાવવા માટે ચાઇનાને અદ્યતન એનવીઆઈડીઆઈએ જી.પી.યુ. ના આયાતને અવરોધિત કર્યા, અને ત્યારબાદ વધુ પ્રતિબંધો લાદ્યા છે, પરંતુ દેખીતી રીતે તે ડીપસીકને રોકી નથી. કાગળ મુજબ, કંપનીએ તેના વી 3 મોડેલને 2,048 એનવીડિયા એચ 800 જીપીયુના ક્લસ્ટર પર તાલીમ આપી – એચ 100 ના અપંગ સંસ્કરણો.
સસ્તી પર તાલીમ
એચ 800 માર્ચ 2023 માં શરૂ કરાયેલ, ચીનને યુ.એસ. નિકાસ પ્રતિબંધોનું પાલન કરવા માટે, અને 2 ટીબી/એસ બેન્ડવિડ્થ સાથે 80 જીબી એચબીએમ 3 મેમરી દર્શાવે છે.
તે નવા એચ 200 ની પાછળ પાછળ છે, જે એચબીએમ 3 ઇ મેમરી અને 4.8TB/એસ બેન્ડવિડ્થની 141 જીબી પ્રદાન કરે છે, અને એએમડીની વૃત્તિ એમઆઈ 325x જે 256 જીબી એચબીએમ 3 ઇ મેમરી અને 6 ટીબી/એસ બેન્ડવિડ્થ બંને સાથે આગળ વધે છે.
ક્લસ્ટર ડીપસીકમાં દરેક નોડ ઇન્ટ્રા-નોડ કમ્યુનિકેશન માટે એનવીલિંક અને એનવીસ્વિચ દ્વારા જોડાયેલા 8 જીપીયુ પર પ્રશિક્ષિત છે, જ્યારે ઇન્ફિનીબેન્ડ ઇન્ટરકનેક્ટ્સ ગાંઠો વચ્ચેના સંદેશાવ્યવહારને હેન્ડલ કરે છે. એચ 800 માં એચ 100 ની તુલનામાં ઓછી એનવીલિંક બેન્ડવિડ્થ છે, અને આ, સ્વાભાવિક રીતે, મલ્ટિ-જીપીયુ સંદેશાવ્યવહાર પ્રભાવને અસર કરે છે.
ડીકસીક-વી 3 ને પાઇપલાઇન અને ડેટા સમાંતરવાદ, મેમરી optim પ્ટિમાઇઝેશન અને નવીન ક્વોન્ટીઝેશન તકનીકોના સંયોજનનો ઉપયોગ કરીને, 14.8 ટ્રિલિયન ટોકન્સ પર પ્રીટ્રેઇનિંગ અને ફાઇન-ટ્યુનિંગ માટે કુલ 2.79 મિલિયન જીપીયુ-કલાકોની આવશ્યકતા છે.
આગળનું પ્લેટફોર્મજેણે ડીપસીક કેવી રીતે કાર્ય કરે છે તેના માટે deep ંડા ડાઇવ કર્યું છે, “જીપીયુ કલાક દીઠ $ 2 ની કિંમત પર – અમને કોઈ ખ્યાલ નથી કે તે ખરેખર ચીનમાં પ્રવર્તમાન ભાવ છે – તો પછી વી 3 ને તાલીમ આપવા માટે ફક્ત 5.58 મિલિયન ડોલરનો ખર્ચ થાય છે.”