હિન્દીમાં AI સાથે વાત કરવી પડી શકે મોંઘી, ‘લેન્ગવેજ ટેક્સ’ની ચર્ચા તેજ
AI Language Tax: જો તમે હિન્દી અથવા અંગ્રેજી સિવાયની કોઈપણ ભાષામાં AI ચેટબોટ સાથે વાત કરો છો તો તેનો ઉપયોગ કરવાથી તમને વધુ ખર્ચ થઈ શકે છે. OpenAI, Anthropic અને Google જેવી કંપનીઓ ઘણીવાર તેમના નવા AI મોડેલ્સને એવા સાધનો તરીકે રજૂ કરે છે જે દરેક માટે સમાન રીતે કાર્ય કરે છે, પછી ભલે તેઓ ક્યાં રહે છે અથવા કઈ ભાષા બોલે છે. જો કે, સંશોધકોના નવા ડેટા સૂચવે છે કે જે વપરાશકર્તાઓ હિન્દી, અરબી અને ચાઇનીઝ જેવી ભાષાઓમાં AI નો ઉપયોગ કરે છે તેઓ ખરેખર અંગ્રેજીમાં AI સાથે વાત કરતા લોકો કરતાં વધુ ચૂકવણી કરી શકે છે.
આનું કારણ શું છે?
AI મોડેલ ભાષાને કેવી રીતે પ્રક્રિયા કરે છે તેના આધારે, હિન્દીમાં સમાન પ્રોમ્પ્ટ (સૂચના) અંગ્રેજી કરતાં વધુ ટોકન્સ – AI સિસ્ટમ ટેક્સ્ટ વાંચવા અને સમજવા માટે જે એકમોનો ઉપયોગ કરે છે – જનરેટ કરી શકે છે. સરળ શબ્દોમાં કહીએ તો, હિન્દીમાં સમાન વાત કહેવાથી અંગ્રેજી કરતાં AI માટે વધુ ટોકન્સનો ઉપયોગ થાય છે. આનાથી અંગ્રેજી ન બોલતા લોકો માટે AI નો ઉપયોગ વધુ ખર્ચાળ બને છે.
લેન્ગવેજ ટેક્સ : શું મુદ્દો છે?
સંશોધકો અને વિકાસકર્તાઓ ઘણીવાર આ ઘટનાને ભાષા કર તરીકે ઓળખે છે, અથવા તેને એક છુપાયેલ ખર્ચ માનવામાં આવે છે જે AI મોડેલો વિવિધ ભાષાઓમાં કેવી રીતે પ્રક્રિયા કરે છે તેમાંથી ઉદ્ભવે છે. થોડા અઠવાડિયા પહેલા, OpenAI સંશોધક Aran Komatsuzaki એ એક પ્રયોગનું વર્ણન કર્યું હતું જેમાં OpenAI અને Anthropic ના ટોકનાઇઝર્સ વિવિધ ભાષાઓમાં ટેક્સ્ટ પર પ્રક્રિયા કરે છે. AI સંશોધક રિચ સટનના પ્રખ્યાત લેખ “ધ બિટર લેસન” ને બેન્ચમાર્ક તરીકે ઉપયોગ કરીને, Komatsuzaki એ ટેક્સ્ટનો બહુવિધ ભાષાઓમાં અનુવાદ કર્યો અને અવલોકન કર્યું કે વિવિધ AI સિસ્ટમો કેટલા ટોકન જનરેટ કરે છે.
અમારી WhatsApp ચેનલમાં જોડાવા આ લિંક પર ક્લીક કરો
https://whatsapp.com/channel/0029VauCUMx6LwHmdrOBwa2X
પરિણામોએ અંગ્રેજી અને અન્ય ભાષાઓ વચ્ચે નોંધપાત્ર તફાવત દર્શાવ્યો. વિશ્લેષણ મુજબ, ઓપનએઆઈના ટોકનાઇઝર પર હિન્દી ટેક્સ્ટને અંગ્રેજી કરતાં 1.37 ગણા વધુ ટોકનની જરૂર હતી. એન્થ્રોપિકના ક્લાઉડ ટોકનાઇઝર પર આ આંકડો વધીને 3.24 ગણો વધુ ટોકન થયો. ક્લાઉડ પર અરબીને 2.86 ગણા વધુ ટોકનની જરૂર હતી, જ્યારે ચાઇનીઝને 1.71 ગણા વધુ ટોકનની જરૂર હતી.
આ પણ વાંચો:બાથરૂમની ટાઇલ્સ પર ક્ષારના જીદ્દી ડાઘ જામી ગયા છે? 10 રૂપિયાની આ વસ્તુથી થઈ જશે ચકાચક
આ પણ વાંચો:જૂના કપડાં દાન કરવાની કે ફેંકી દેવાની આદત છે તો ચેતજો, શનિદેવ થશે ક્રોધિત
