என்றால் என்ன ChatGPT Token Counter?
▾
ChatGPT டோக்கன் கவுண்டர் கொடுக்கப்பட்ட உரையில் உள்ள டோக்கன்களின் எண்ணிக்கையை மதிப்பிடுகிறது மற்றும் GPT-4o, GPT-4 Turbo, GPT-3.5 Turbo மற்றும் பிற LLMகள் உள்ளிட்ட OpenAI மாடல்களுக்கான API செலவைக் கணக்கிடுகிறது. டோக்கன்கள் பெரிய மொழி மாதிரிகளில் உரை செயலாக்கத்தின் அடிப்படை அலகு ஆகும் - அவை எழுத்துக்கள் அல்லது சொற்கள் அல்ல, ஆனால் துணை வார்த்தை அலகுகள் பொதுவாக ஆங்கிலத்தில் ஒரு டோக்கனுக்கு சராசரியாக 4 எழுத்துகள் அல்லது 0.75 வார்த்தைகள். API செலவு மேலாண்மை, உடனடி பொறியியல் மற்றும் மாதிரி சூழல் சாளர வரம்புகளுக்குள் இருக்க டோக்கன் எண்ணிக்கையைப் புரிந்துகொள்வது அவசியம். GPT-4o 128K டோக்கன் சூழல் சாளரத்தை ஆதரிக்கிறது, அதாவது ஒரு உரையாடலில் சுமார் 96,000 வார்த்தைகள் ஒருங்கிணைந்த உள்ளீடு மற்றும் வெளியீடு அடங்கும். ஏபிஐ பில்லிங், உள்ளீடு மற்றும் வெளியீட்டு டோக்கன்களுக்கான தனி விகிதங்களைக் கொண்ட டோக்கன் எண்ணிக்கையை அடிப்படையாகக் கொண்டிருப்பதால், துல்லியமான டோக்கன் மதிப்பீடு நேரடியாக வளர்ச்சி பட்ஜெட்கள் மற்றும் பயன்பாட்டுச் செலவுகளை பாதிக்கிறது.
DigiCalcs delivers precision-engineered tools for engineers and STEM professionals.
சூத்திரம்
▾
டோக்கன் எண்ணிக்கை (தோராயமான) = எழுத்து எண்ணிக்கை / 4, அல்லது வார்த்தை எண்ணிக்கை / 0.75. API செலவு = (உள்ளீடு டோக்கன்கள் / 1,000,000) x ஒரு மில்லியனுக்கு உள்ளீட்டு விலை + (வெளியீட்டு டோக்கன்கள் / 1,000,000) x ஒரு மில்லியனுக்கு வெளியீட்டு விலை.மாறி விளக்கம்
▾
| குறியீடு | பெயர் | அலகு | விவரிப்பு |
|---|---|---|---|
| T | டோக்கன் எண்ணிக்கை | tokens | மாதிரியின் டோக்கனைசரால் தீர்மானிக்கப்படும் உள்ளீடு அல்லது வெளியீட்டு உரையில் உள்ள டோக்கன்களின் எண்ணிக்கை (எ.கா., GPT-4க்கான cl100k_base) |
| C | எழுத்து எண்ணிக்கை | characters | உரையில் உள்ள எழுத்துக்களின் மொத்த எண்ணிக்கை — ஆங்கிலத்தில் ஒரு டோக்கனுக்கு தோராயமாக 4 எழுத்துகள் |
| Pi | உள்ளீட்டு விலை | USD per 1M tokens | தேர்ந்தெடுக்கப்பட்ட மாடலுக்கான ஒரு மில்லியன் உள்ளீடு (உடனடி) டோக்கன்களுக்கான விலை |
| Po | வெளியீட்டு விலை | USD per 1M tokens | தேர்ந்தெடுக்கப்பட்ட மாடலுக்கான ஒரு மில்லியன் வெளியீடு (நிறைவு) டோக்கன்களுக்கான விலை - பொதுவாக உள்ளீட்டு விலையை விட 2-4 மடங்கு அதிகம் |
| W | சூழல் சாளரம் | tokens | ஒரே கோரிக்கையில் மாடல் ஆதரிக்கும் அதிகபட்ச ஒருங்கிணைந்த உள்ளீடு + வெளியீடு டோக்கன்கள் |
எப்படி ChatGPT Token Counter
▾
- 1டோக்கன் கவுண்டர் உள்ளீட்டு புலத்தில் உங்கள் உரையை ஒட்டவும் அல்லது தட்டச்சு செய்யவும் - கருவி அதை உண்மையான நேரத்தில் செயலாக்குகிறது.
- 2கவுண்டர் ஒரு டோக்கனுக்கு ~4 எழுத்துகளின் தோராயத்தைப் பயன்படுத்தி டோக்கன் எண்ணிக்கையை மதிப்பிடுகிறது (அல்லது துல்லியமான எண்ணிக்கைகளுக்கு உண்மையான cl100k_base டோக்கனைசரைப் பயன்படுத்துகிறது).
- 3நீங்கள் பயன்படுத்தத் திட்டமிடும் AI மாதிரியைத் தேர்ந்தெடுக்கவும் - GPT-4o, GPT-4 Turbo, GPT-3.5 Turbo, Claude 3, முதலியன - விலை கணிசமாக வேறுபடுகிறது.
- 4கால்குலேட்டர் உங்கள் உள்ளீட்டு டோக்கன் எண்ணிக்கை மற்றும் உங்களின் மதிப்பிடப்பட்ட வெளியீட்டு டோக்கன் எண்ணிக்கைக்கு மாதிரியின் ஒரு மில்லியனுக்கு டோக்கன் விலையைப் பயன்படுத்துகிறது.
- 5மொத்த API செலவு கணக்கிடப்படுகிறது: (உள்ளீடு டோக்கன்கள் x உள்ளீட்டு விகிதம்) + (வெளியீட்டு டோக்கன்கள் x வெளியீடு விகிதம்).
- 6உங்கள் ப்ராம்ட் எவ்வளவு மாடலின் சூழல் சாளரத்தை பயன்படுத்துகிறது என்பதையும் கருவி காட்டுகிறது, இது வரம்பிற்குள் இருக்க உதவுகிறது.
- 7தொகுதி செயல்பாடுகளுக்கு, மொத்த திட்டச் செலவைக் கணக்கிட, ஒரு கோரிக்கைக்கான செலவை API அழைப்புகளின் எண்ணிக்கையால் பெருக்கவும்.
தீர்க்கப்பட்ட எடுத்துக்காட்டுகள்
▾
200 வார்த்தைகள் / 0.75 = ~267 டோக்கன்கள் உள்ளீடு. GPT-4o விகிதங்களில் ($2.50/1M உள்ளீடு, $10.00/1M வெளியீடு): உள்ளீட்டு செலவு = 267/1M x $2.50 = $0.00067, வெளியீடு செலவு = 267/1M x $10.00 = $0.00267. ஒரு கோரிக்கைக்கான மொத்தம் = $0.00334. 10,000 வாடிக்கையாளர் தொடர்புகள்/மாதம், மொத்த செலவு சுமார் $33.40 ஆகும்.
10,000 வார்த்தைகள் / 0.75 = ~13,333 உள்ளீட்டு டோக்கன்கள். 500 வார்த்தைகள் / 0.75 = ~667 வெளியீடு டோக்கன்கள். உள்ளீடு செலவு: 13,333/1M x $2.50 = $0.0333. வெளியீட்டு விலை: 667/1M x $10.00 = $0.00667. ஒரு ஆவணத்திற்கு மொத்தம் = ~$0.04. 1,000 ஆவணங்களைச் சுருக்கமாக $40 செலவாகும்.
GPT-3.5 டர்போ: (1,000/1M x $0.50) + (500/1M x $1.50) = $0.0005 + $0.00075 = $0.00125. GPT-4o: (1,000/1M x $2.50) + (500/1M x $10.00) = $0.0025 + $0.005 = $0.0075. GPT-4o ஒரு கோரிக்கைக்கு 6 மடங்கு விலை அதிகம் ஆனால் கணிசமாக சிறந்த பகுத்தறிவு மற்றும் அறிவுறுத்தல்-பின்வரும் தரத்தை வழங்குகிறது.
தினசரி உள்ளீடு டோக்கன்கள்: 500 x 100,000 = 50M. தினசரி வெளியீடு டோக்கன்கள்: 300 x 100,000 = 30M. உள்ளீடு செலவு: 50M/1M x $0.15 = $7.50. வெளியீட்டு விலை: 30M/1M x $0.60 = $18.00. தினசரி மொத்தம் = $25.50, மாதாந்திர = ~$765. GPT-4o மினி அதிக அளவு பயன்பாடுகளுக்காக வடிவமைக்கப்பட்டுள்ளது, அங்கு உச்ச பகுத்தறிவு திறனை விட செலவு திறன் முக்கியமானது.
நடைமுறை பயன்பாடுகள்
▾
ஏபிஐ பட்ஜெட் முன்கணிப்பு: டெவலப்பர்கள் எதிர்பார்க்கப்படும் கோரிக்கை அளவுகள், சராசரி உடனடி நீளம் மற்றும் பொறியியல் பட்ஜெட்டை அமைப்பதற்கான மாதிரித் தேர்வு ஆகியவற்றின் அடிப்படையில் மாதாந்திர OpenAI API செலவுகளை மதிப்பிடுகின்றனர்.
உடனடி தேர்வுமுறை: வெளியீட்டுத் தரத்தைப் பராமரிக்கும் மிகவும் செலவு-திறனுள்ள சூத்திரங்களைக் கண்டறிய பொறியாளர்கள் வெவ்வேறு உடனடி வடிவமைப்புகளின் டோக்கன் எண்ணிக்கையை அளவிடுகின்றனர்.
சாட்பாட் செலவு மாடலிங்: விலை நிர்ணயம், விளிம்புகள் மற்றும் எளிமையான வினவல்களுக்கு மலிவான மாடல்களைப் பயன்படுத்தலாமா என்பதைத் தீர்மானிக்க, AI சாட்போட்களுக்கான ஒவ்வொரு உரையாடல் செலவுகளையும் தயாரிப்புக் குழுக்கள் கணக்கிடுகின்றன.
ஆவண செயலாக்க பைப்லைன்கள்: நிறுவனங்கள் சுருக்கம், பிரித்தெடுத்தல் அல்லது பகுப்பாய்விற்காக GPT-4 மூலம் பெரிய ஆவண கார்போராவை (ஒப்பந்தங்கள், மருத்துவப் பதிவுகள், சட்டப் பதிவுகள்) செயலாக்குவதற்கான செலவை மதிப்பிடுகின்றன.
மாதிரித் தேர்வு: தங்களின் பயன்பாட்டில் உள்ள ஒவ்வொரு பயன்பாட்டிற்கும் உகந்த மாதிரியைத் தேர்வுசெய்ய, தொழில்நுட்ப முன்னணிகள் வெவ்வேறு மாடல்களில் (GPT-4o vs. Claude vs. Gemini) ஒரு பணிக்கான செலவை ஒப்பிடுகின்றன.
சிறப்பு நிகழ்வுகள்
▾
ஆங்கிலம் அல்லாத உரை மற்றும் பன்மொழி டோக்கனைசேஷன்
லத்தீன் அல்லாத ஸ்கிரிப்டுகள் (சீன, ஜப்பானிய, கொரியன், அரபு, இந்தி) பொதுவாக ஆங்கிலத்தை விட ஒரு வார்த்தைக்கு 2-3 மடங்கு அதிக டோக்கன்களை பயன்படுத்துகின்றன, ஏனெனில் டோக்கனைசர் முதன்மையாக ஆங்கில உரையில் பயிற்சியளிக்கப்பட்டது. 1,000-எழுத்துகள் கொண்ட சீன உரை 700-1,000 டோக்கன்களைப் பயன்படுத்தக்கூடும், அதே நேரத்தில் ஆங்கிலத்தில் அதே நீளம் 250 டோக்கன்களை மட்டுமே பயன்படுத்தும். இது பன்மொழி பயன்பாடுகளுக்கான செலவை கணிசமாக பாதிக்கிறது.
குறியீடு டோக்கனைசேஷன்
மூலக் குறியீடு பெரும்பாலும் உரைநடையை விட வித்தியாசமாக டோக்கனைஸ் செய்கிறது. பொதுவான நிரலாக்க முக்கிய வார்த்தைகள் மற்றும் தொடரியல் பொதுவாக ஒற்றை டோக்கன்கள், ஆனால் மாறி பெயர்கள், சரங்கள் மற்றும் கருத்துகள் பரவலாக வேறுபடுகின்றன. உள்தள்ளல் மற்றும் இடைவெளி டோக்கன்களைப் பயன்படுத்துகிறது. சிறிய குறியீடு வடிவமைக்கப்பட்ட குறியீட்டை விட குறைவான டோக்கன்களைப் பயன்படுத்துகிறது. பைதான் பொதுவாக ஜாவா போன்ற வாய்மொழி மொழிகளை விட திறமையாக டோக்கனைஸ் செய்கிறது.
தற்காலிகச் சேமிப்பு உள்ளீட்டு டோக்கன்கள் (உடனடி கேச்சிங்)
GPT-4o மற்றும் GPT-4o மினிக்கான தற்காலிகச் சேமிப்பு உள்ளீட்டு டோக்கன்களில் 50% தள்ளுபடியை OpenAI வழங்குகிறது, அதே ப்ராம்ட் முன்னொட்டு API அழைப்புகள் முழுவதும் மீண்டும் பயன்படுத்தப்படும். உங்கள் சிஸ்டம் ப்ராம்ட் (சொல்லுங்கள், 2,000 டோக்கன்கள்) கோரிக்கைகள் முழுவதும் ஒரே மாதிரியாக இருந்தால், அந்த கேச் செய்யப்பட்ட டோக்கன்களுக்கான முதல் அழைப்பின் முழு விலையையும், அடுத்த அழைப்புகளில் பாதி விலையையும் செலுத்துவீர்கள். இது நீண்ட சிஸ்டம் ப்ராம்ட்களைக் கொண்ட பயன்பாடுகளுக்கான செலவுகளை 20-40% குறைக்கலாம்.
OpenAI மாடல் விலை (2025)
▾
| மாதிரி | உள்ளீடு (ஒரு மில்லியன் டோக்கன்களுக்கு) | வெளியீடு (1M டோக்கன்களுக்கு) | சூழல் சாளரம் |
|---|---|---|---|
| GPT-4o | $2.50 | $10.00 | 128K டோக்கன்கள் |
| GPT-4o மினி | $0.15 | $0.60 | 128K டோக்கன்கள் |
| GPT-4 டர்போ | $10.00 | $30.00 | 128K டோக்கன்கள் |
| GPT-3.5 டர்போ | $0.50 | $1.50 | 16 ஆயிரம் டோக்கன்கள் |
| o1 (காரணம்) | $15.00 | $60.00 | 200K டோக்கன்கள் |
| o1-மினி | $3.00 | $12.00 | 128K டோக்கன்கள் |
| கிளாட் 3.5 சொனட் (மானுடவியல்) | $3.00 | $15.00 | 200K டோக்கன்கள் |
| ஜெமினி 1.5 ப்ரோ (கூகுள்) | $1.25 | $5.00 | 1M டோக்கன்கள் |
அடிக்கடி கேட்கப்படும் கேள்விகள்
▾
டோக்கன் என்றால் என்ன?
டோக்கன் என்பது எல்எல்எம்களால் உரையைச் செயலாக்கப் பயன்படுத்தப்படும் ஒரு துணைச்சொல் அலகு ஆகும். 'தி' அல்லது 'மற்றும்' போன்ற பொதுவான சொற்கள் ஒற்றை டோக்கன்கள், அதே சமயம் நீளமான அல்லது அசாதாரணமான சொற்கள் பல டோக்கன்களாகப் பிரிக்கப்படலாம் (எ.கா., 'கிரிப்டோகரன்சி' 'கிரிப்டோ' + 'நாணயம்' = 2 டோக்கன்களாக இருக்கலாம்). ஆங்கிலத்தில், 1 டோக்கன் சராசரியாக ~4 எழுத்துகள் அல்லது ~0.75 வார்த்தைகள். ஆங்கிலம் அல்லாத மொழிகள் மற்றும் குறியீடு பொதுவாக வெவ்வேறு டோக்கன்-ஒர்-வார்ட் விகிதங்களைக் கொண்டிருக்கும்.
உள்ளீட்டு டோக்கன்களை விட வெளியீட்டு டோக்கன்கள் ஏன் விலை அதிகம்?
வெளியீட்டு (நிறைவு) டோக்கன்களுக்கு உள்ளீடு (உடனடி) டோக்கன்களை விட அதிகமான கணக்கீடு தேவைப்படுகிறது, ஏனெனில் மாதிரியானது ஒவ்வொரு வெளியீட்டு டோக்கனையும் வரிசையாக உருவாக்க வேண்டும், ஒவ்வொன்றிற்கும் நரம்பியல் நெட்வொர்க் மூலம் முழு முன்னோக்கி அனுப்ப வேண்டும். உள்ளீட்டு டோக்கன்களை இணையாக செயலாக்க முடியும். கணக்கீட்டு செலவில் இந்த சமச்சீரற்ற தன்மை வெளியீட்டு டோக்கன்களுக்கான 2-4x விலை பிரீமியத்தில் பிரதிபலிக்கிறது.
ஒரு டோக்கன் மதிப்பீட்டின் ~4 எழுத்துகள் எவ்வளவு துல்லியமானது?
4-எழுத்து தோராயமானது நிலையான ஆங்கில உரைநடைக்கு (10-15% க்குள்) நியாயமான துல்லியமானது. இருப்பினும், குறியீடு (தொடக்கக் குறியீடுகள் காரணமாக ஒரு டோக்கனுக்கு 2-3 எழுத்துகள் பயன்படுத்தப்படலாம்), லத்தீன் அல்லாத ஸ்கிரிப்டுகள் (ஒரு டோக்கனுக்கு சீனம்/ஜப்பானியர்கள் 1-2 எழுத்துகளைப் பயன்படுத்தலாம்) மற்றும் சிறப்புச் சொற்கள் ஆகியவற்றுக்கு இது குறைவான துல்லியமாகிறது. துல்லியமான எண்ணிக்கைக்கு, OpenAI இன் டிக்டோக்கன் லைப்ரரி அல்லது உண்மையான டோக்கனைசரைப் பயன்படுத்தவும்.
சூழல் சாளரம் என்றால் என்ன, அது ஏன் முக்கியமானது?
சூழல் சாளரம் என்பது ஒரு மாதிரி ஒரே கோரிக்கையில் செயல்படுத்தக்கூடிய அதிகபட்ச டோக்கன்களின் எண்ணிக்கை (உள்ளீடு + வெளியீடு இணைந்தது) ஆகும். GPT-4o 128K டோக்கன் சாளரத்தைக் கொண்டுள்ளது (~96,000 வார்த்தைகள்). உங்கள் உள்ளீடு சூழல் சாளரத்தை மீறினால், நீங்கள் துண்டிக்க வேண்டும், சுருக்க வேண்டும் அல்லது மீட்டெடுப்பு-ஆக்மென்ட் ஜெனரேஷன் (RAG) பயன்படுத்த வேண்டும். வரம்பை மீறினால் API பிழை ஏற்படும்.
கணினி தூண்டுதல்கள் மற்றும் உரையாடல் வரலாறு டோக்கன் பயன்பாட்டில் கணக்கிடப்படுமா?
ஆம். ஒவ்வொரு ஏபிஐ அழைப்பிலும் முழு சிஸ்டம் ப்ராம்ப்ட், அனைத்து உரையாடல் வரலாறு மற்றும் புதிய பயனர் செய்தி ஆகியவை உள்ளீட்டு டோக்கன்களாக இருக்கும். சாட்போட்டில், உரையாடல் வரலாறு ஒவ்வொரு திருப்பத்திலும் வளரும், எனவே உரையாடல்கள் நீளமாகும்போது செலவுகள் அதிகரிக்கும். மல்டி-டர்ன் அப்ளிகேஷன்களில் செலவுகளைக் கட்டுப்படுத்த உரையாடல் துண்டிப்பு அல்லது சுருக்க உத்திகளைச் செயல்படுத்தவும்.
GPT-4o விலை Claude மற்றும் பிற மாடல்களுடன் எவ்வாறு ஒப்பிடப்படுகிறது?
2025 இன் படி: GPT-4o என்பது 1M டோக்கன்களுக்கு $2.50/$10.00 ஆகும் (உள்ளீடு/வெளியீடு). ஆந்த்ரோபிக் கிளாட் 3.5 சொனட் ஒரு 1 மில்லியனுக்கு $3.00/$15.00 ஆகும். கூகிள் ஜெமினி 1.5 ப்ரோ 1 மில்லியன் டாலர்களுக்கு $1.25/$5.00 ஆகும். GPT-4o மினி $0.15/$0.60 விலையில் மலிவான எல்லை மாடல் விருப்பமாகும். வழங்குநர்கள் செலவு-செயல்திறனில் போட்டியிடுவதால் விலைகள் அடிக்கடி மாறுகின்றன.
தவிர்க்க வேண்டிய பொதுவான தவறுகள்
▾
- !1 டோக்கன் = 1 சொல் — ஆங்கிலத்தில், 1 டோக்கன் என்பது தோராயமாக 0.75 வார்த்தைகள் (அல்லது 1 சொல் = ~1.33 டோக்கன்கள்) மற்றும் இந்த விகிதம் மற்ற மொழிகளுக்கு கணிசமாக மாறுபடும்.
- !உரையாடல் வரலாறு ஒவ்வொரு திருப்பத்திலும் டோக்கன்களைக் குவிக்கிறது என்பதை மறந்துவிடுவது - 20-டர்ன் சாட்போட் உரையாடல் ஒவ்வொரு தனிப்பட்ட செய்தியும் சிறியதாக இருந்தாலும் ஒரு கோரிக்கைக்கு 10,000+ உள்ளீட்டு டோக்கன்களை அனுப்பலாம்.
- !சிஸ்டம் ப்ராம்ட் டோக்கன் செலவைக் கணக்கிடவில்லை, இது ஒவ்வொரு API அழைப்பிலும் சேர்க்கப்பட்டுள்ளது மற்றும் விரிவான வழிமுறைகளுக்கு 500-2,000 டோக்கன்களாக இருக்கலாம்.
- !வெளியீட்டுத் தர வேறுபாடுகளைக் கருத்தில் கொள்ளாமல் மாடல் விலைகளை ஒப்பிடுதல் - GPT-4o மினி GPT-4o ஐ விட 17 மடங்கு மலிவானது, ஆனால் குறைந்த பகுத்தறிவு திறன் காரணமாக அதே முடிவை அடைய அதிக டோக்கன்கள் தேவைப்படலாம்.
- !உள்ளீடு வெர்சஸ் அவுட்புட் டோக்கன்களுக்கான தனி விலையை புறக்கணித்தல் — வெளியீட்டு டோக்கன்கள் 2-4 மடங்கு அதிக விலை கொண்டவை, எனவே நீண்ட பதில்களை உருவாக்கும் பயன்பாடுகள் விகிதாச்சாரத்தில் அதிகமாக செலவாகும்.
நிபுணர் குறிப்பு
தரத்தை இழக்காமல் API செலவுகளைக் குறைக்க: (1) வகைப்பாடு மற்றும் பிரித்தெடுத்தல் போன்ற எளிய பணிகளுக்கு GPT-4o மினியைப் பயன்படுத்தவும், சிக்கலான காரணத்திற்காக GPT-4o ஐ ஒதுக்கவும். (2) ப்ராம்ட் கேச்சிங்கைச் செயல்படுத்தி 50% தள்ளுபடியைப் பெற மீண்டும் மீண்டும் கணினி அறிவுறுத்தல்கள். (3) எதிர்பாராத நீண்ட வெளியீடுகளைத் தடுக்க அதிகபட்ச_டோக்கன்களை அமைக்கவும். (4) முழு டிரான்ஸ்கிரிப்டை அனுப்புவதற்குப் பதிலாக உரையாடல் வரலாற்றைச் சுருக்கவும். நன்கு உகந்த பயன்பாடு, அப்பாவி API பயன்பாட்டுடன் ஒப்பிடும்போது 60-80% செலவைக் குறைக்கும்.
உங்களுக்கு தெரியுமா?
AI இல் 'டோக்கனைசேஷன்' என்ற வார்த்தையானது ஆர்வமுள்ள இரட்டை வாழ்க்கையைக் கொண்டுள்ளது - இயற்கையான மொழி செயலாக்கத்தில் இது உரையை துணை வார்த்தை அலகுகளாகப் பிரிப்பதைக் குறிக்கிறது, அதே சமயம் சைபர் பாதுகாப்பில் இது உணர்திறன் இல்லாத பிளேஸ்ஹோல்டர்களுடன் முக்கியமான தரவை மாற்றுவதாகும். இரண்டு அர்த்தங்களும் தகவலை சிறிய அலகுகளாக மாற்றுவதை உள்ளடக்கியது, ஆனால் முற்றிலும் வேறுபட்ட நோக்கங்களுக்காக. OpenAI இன் cl100k_base டோக்கனைசர் சரியாக 100,256 தனிப்பட்ட டோக்கன்களின் சொற்களஞ்சியத்தைக் கொண்டுள்ளது.
Regional Guides
▾
United States▾
European Union▾
Asia-Pacific▾
குறிப்புகள்
வாராந்திர கணித உதவிக்குறிப்புகளைப் பெறுங்கள்
ஒவ்வொரு வாரமும் கால்குலேட்டர் உதவிக்குறிப்புகளைப் பெறும் 12,000+ சந்தாதாரர்களுடன் சேரவும்.