GPT တိုကင်ခွဲနည်းဖြင့် ရေတွက်သည်။ အခြားမော်ဒယ်များတွင် ရလဒ်ကွာနိုင်သည်။
ဖိုင်များကို စက်တွင်း တစ်ခုချင်း ရေတွက်သည်။ စာသားတည်းဖြတ်စက်ထဲ မတင်ဘဲ အကြောင်းအရာအပြည့်ကို ရေတွက်သည်။ ပထမတိုကင် 500 ကို အစမ်းကြည့်ရန် ပြီးဆုံးသောဖိုင်ကို ရွေးပါ။
နေရာလွတ်၊ လိုင်းခွဲနှင့် တက်ဘ်တို့၏ အရေအတွက်သည် အက္ခရာအရေအတွက်ဖြစ်သည်။ အလွတ်အက္ခရာသည် အနီးရှိစာသားနှင့် တိုကင်တစ်ခုတည်းဖြစ်နိုင်သဖြင့် ဤအရေအတွက်ကို စုစုပေါင်းတိုကင်မှ မနုတ်နိုင်ပါ။
အက္ခရာတစ်ခုသည် တိုကင်တစ်ခုထက်ပို၍ ပါဝင်နိုင်သည်။ မူရင်းစာသားမပျက်စေရန် ဘိုက်အပိုင်းတစ်ခုချင်းကို ဆယ့်ခြောက်လီကိန်းတန်ဖိုးဖြင့် ပြသည်။
AI ပရောမ့်တွင် မသုံးမီ စာသားတိုင်းတာရန် ဤအခမဲ့တိုကင်ကောင်တာနှင့် တွက်စက်ကို သုံးပါ။ တိုကင်၊ စကားလုံးနှင့် အက္ခရာအရေအတွက်ကို ကြည့်၊ နေရာလွတ်စစ်ပြီး စာသားကို တိုကင်အဖြစ် မည်သို့ခွဲသည်ကို လေ့လာပါ။
သင်ထည့်သောစာသား၏ တိုကင်များကို o200k_base GPT တိုကင်ခွဲစည်းမျဉ်းဖြင့် တွက်သည်။ စကားလုံး၊ အက္ခရာနှင့် နေရာလွတ်အရေအတွက်ကိုလည်း ပြသည်။ တိုကင်တွင် စကားလုံး၊ စကားလုံးတစ်စိတ်တစ်ပိုင်း၊ ပုဒ်ဖြတ်သင်္ကေတ သို့မဟုတ် နေရာလွတ် ပါနိုင်သည်။
မတူပါ။ တိုကင်တစ်ခုတွင် အက္ခရာများစွာ သို့မဟုတ် စကားလုံးတစ်စိတ်တစ်ပိုင်းသာ ပါနိုင်ပြီး အက္ခရာတစ်ခုက တိုကင်များစွာ သုံးနိုင်သည်။ အီမိုဂျီနှင့် ပေါင်းစပ်အမှတ်ပါသောအက္ခရာသည် အက္ခရာတစ်ခုလို မြင်ရသော်လည်း တိုကင်များစွာ သုံးနိုင်သည်။ အက္ခရာနှင့် တိုကင်အကြား ပုံသေအချိုးမရှိပါ။
သုံးမျိုးလုံးကို ပံ့ပိုးသည်။ သို့သော် CJK ဟု အုပ်စုဖွဲ့ခြင်းက အက္ခရာတစ်ခုလျှင် တူညီသောတိုကင်အရေအတွက် ရှိစေခြင်း မဟုတ်ပါ။ အသုံးများသောအက္ခရာအစဉ်များသည် တိုကင်တစ်ခုဖြစ်နိုင်ပြီး အက္ခရာ သို့မဟုတ် အသံစုတစ်ခုကို တိုကင်များစွာ ခွဲနိုင်သည်။ အရေအတွက်သည် ဘာသာပေါ်သာမက တကယ့်စာသားနှင့် တိုကင်ခွဲစည်းမျဉ်းအပေါ် မူတည်သည်။
ကောင်တာသည် လက်တင်၊ စီရီလစ်၊ အာရဗီ၊ အိန္ဒိယစာစနစ်နှင့် အခြားစာစနစ်များအပြင် ဘာသာရောစာသားကိုလည်း ပံ့ပိုးသည်။ စကားလုံးများကို ပိုသေးသောအပိုင်းများ ခွဲနိုင်သဖြင့် အင်္ဂလိပ်စကားလုံး သို့မဟုတ် အက္ခရာခန့်မှန်းမှုကို ဘာသာတိုင်းတွင် မသုံးနိုင်ပါ။ ဝါကျတစ်ခုတည်း၏ ဘာသာပြန်များတွင် တိုကင်အရေအတွက် ကွာနိုင်သည်။
ခေတ်မီဘရောက်ဇာတွင် ဟန်အက္ခရာ၊ ဂျပန်ကနာ၊ ကိုရီးယားအသံစု သို့မဟုတ် လက်တင်အက္ခရာကို အများအားဖြင့် အက္ခရာတစ်ခုစီအဖြစ် တွက်သည်။ အသံဝဲပေါင်းအမှတ်ပါသောအက္ခရာ သို့မဟုတ် ပေါင်းစပ်အီမိုဂျီကိုလည်း အများအားဖြင့် တစ်ခုအဖြစ် တွက်သည်။ နေရာလွတ်နှင့် ပုဒ်ဖြတ်သင်္ကေတ ပါဝင်သည်။ စကားလုံးခွဲမှုသည် ဘာသာအလိုက်နယ်နိမိတ်ကို သုံးသဖြင့် CJK စာပိုဒ်တွင် နေရာလွတ်မရှိရုံဖြင့် တစ်လုံးတည်းဟု မတွက်ပါ။ ထိုအရေအတွက်နှစ်မျိုးစလုံးသည် တိုကင်နှင့် သီးခြားဖြစ်သည်။
နေရာလွတ်နှင့် အခြားအလွတ်အက္ခရာများကို တိုကင်တွက်ရာတွင် ထည့်တွက်သည်။ နေရာလွတ်တစ်ခုသည် နောက်စကားလုံးနှင့် ပေါင်းနိုင်သလို သီးခြားတိုကင်ဖြစ်နိုင်သည်။ နေရာလွတ်ဖယ်ခြင်းက အနီးရှိတိုကင်နယ်နိမိတ်ကို ပြောင်းနိုင်သဖြင့် နေရာလွတ်တစ်ခုသည် တိုကင်တစ်ခုဟု အမြဲမဆိုလိုပါ။
မတူနိုင်ပါ။ မော်ဒယ်များက မတူသောတိုကင်ခွဲစည်းမျဉ်းကို သုံးနိုင်သည်။ ဤကိရိယာသည် ရိုးရိုးစာသားအတွက် GPT ကိုးကားအရေအတွက်ကို ပေးသည်။ ပြည့်စုံသောချတ်တောင်းဆိုမှုတွင် အခန်းကဏ္ဍ၊ မက်ဆေ့ချ်ဖော်မတ်နှင့် ကိရိယာအဓိပ္ပာယ်သတ်မှတ်ချက်တို့လည်း ပါနိုင်သဖြင့် စုစုပေါင်းအသုံးပြုမှု ကွာနိုင်သည်။
မပို့ပါ။ စာသားနှင့် တင်သွင်းဖိုင်များကို ဘရောက်ဇာတွင် ရေတွက်သည်။ ကိရိယာက အကြောင်းအရာကို ရေတွက်ဝန်ဆောင်မှုထံ မပို့ပါ။
ပုံသေစာသားအလျား သို့မဟုတ် ဖိုင်ပမာဏကန့်သတ်ချက် မရှိပါ။ အဝင်ကြီးများသည် အချိန်ပိုလိုပြီး သင့်စက်တွင် ရရှိနိုင်သောမှတ်ဉာဏ်အပေါ် မူတည်သည်။ ဖိုင်မုဒ်သည် ဖိုင်တစ်ခုစီကို စာသားတည်းဖြတ်စက်ထဲမထည့်ဘဲ အပြည့်အစုံတွက်ပြီး ပယ်ဖျက်လျှင် ပြီးသောရလဒ်ကို ထိန်းထားသည်။ တိုကင်အစမ်းမြင်ကွင်းတွင် ပထမ 500 တိုကင်သာ ပြပြီး CSV အစီရင်ခံစာတွင် အရေအတွက်အပြည့်အစုံ ပါသည်။
ဆက်စပ်ကိရိယာများ: စကားလုံးရေတွက်စက်
Java, Python, JavaScript, JSON, HTML နှင့် အခြားကုဒ်များကို ဖော်မတ်ချ၊ ဖတ်ရလွယ်အောင်ပြင်ပြီး အတွင်းချိုင့်မှု၊ အကွာအဝေးနှင့် လိုင်းခွဲများကို ညှိပါ။
အသံသွင်းများကို အပိုင်းဖြတ်၊ ဆက် သို့မဟုတ် ခွဲ၊ တိတ်ဆိတ်မှု သို့မဟုတ် ဆူညံသံဖယ်ပြီး အသံအတိုးအကျယ်၊ အမြန်နှုန်း၊ အသံအနိမ့်အမြင့် သို့မဟုတ် ချန်နယ်များကို ညှိပါ။
CSV သို့မဟုတ် Excel စာရွက်များကို ဖွင့်ပြင်၊ ဇယားစာသားဖော်မတ်ချပြီး CSV ကို Excel သို့မဟုတ် SQL သို့ ပြောင်းပါ။
Markdown ရေးပြီး အစမ်းကြည့်၊ Mermaid ပုံကြမ်းဖော်ပြပြီး Markdown, HTML နှင့် ဇယားများကို ဖော်မတ်အမျိုးမျိုးအကြား ပြောင်းပါ။
စာပိုဒ်များနှိုင်းယှဉ်၊ စကားလုံးနှင့် သော့ချက်ရေတွက်၊ လိုင်းစီ သို့မဟုတ် အစားထိုးပြီး DOCX စာသားကို ကြည့်ပါ။
တရုတ်အဓိပ္ပာယ်၊ အဓိပ္ပာယ်တူနှင့် ဆန့်ကျင်ဘက်စကားလုံးများကို ရှာပါ၊ သို့မဟုတ် ဘာသာစကားအမျိုးမျိုးရှိ IPA အသံထွက်ကို ရှာပါ။
MP3, WAV, FLAC နှင့် အခြားဖော်မတ်များအကြား ပြောင်း၊ အသံ သို့မဟုတ် PCM ဒေတာအကြမ်းဖွင့်ပြီး အသံမက်တာဒေတာကို စစ်ပါ သို့မဟုတ် ပြင်ပါ။
JSON ကို စစ်၊ နှိုင်းယှဉ်၊ မှန်ကန်မှုစစ်ပါ။ JSONPath ဖော်ပြချက်များကို စမ်းပါ သို့မဟုတ် ဒေတာကို CSV, YAML နှင့် XML သို့ ပြောင်းပါ။
အသံကို စာသားပြောင်း၊ စာသားမှ စကားသံဖန်တီး သို့မဟုတ် ဘရောက်ဇာတွင် သင့်အသံကို အသံသွင်းပါ။
ဗီဒီယိုပြောင်းချုံ့၊ ကလစ်အပိုင်းဖြတ် သို့မဟုတ် ဆက်၊ ဖရိမ်အရွယ်ပြောင်းပြီး အသံထုတ်ယူပါ။
စက်တွင်း သို့မဟုတ် စထရီးမင်းဗီဒီယိုဖွင့်၊ စခရင် သို့မဟုတ် ကင်မရာမှတ်တမ်းတင်ပြီး ကင်မရာကို အွန်လိုင်းမှန်အဖြစ် သုံးပါ။
PDF ချုံ့ သို့မဟုတ် ပေါင်း၊ စာမျက်နှာခွဲပြီး ပြန်စီ၊ စာမျက်နှာကို ပုံပြောင်းပြီး စာတမ်းများကို ကြည့်ပါ သို့မဟုတ် နှိုင်းယှဉ်ပါ။
ပုံဖော်မတ်ပြောင်း၊ ဓာတ်ပုံအရွယ်ပြောင်း သို့မဟုတ် အနားဖြတ်၊ ဖိုင်ချုံ့၊ ပုံနှိုင်းယှဉ်ပြီး OCR ဖြင့် စာသားထုတ်ယူပါ။
စခရင်ရှော့ဖမ်းပြီး အလှပြင်၊ စာသားကို ပုံ သို့မဟုတ် GIF ပြောင်း၊ ဝှိုက်ဘုတ်တွင် ဆွဲပြီး စကားလုံးတိမ်ပုံ သို့မဟုတ် ဖက်ဗီကွန် ဖန်တီးပါ။
ဗီဒီယိုအစမ်းမြင်ကွင်းနှင့်အတူ SRT သို့မဟုတ် VTT စာတန်းထိုးများပြင်၊ အချိန်ရွှေ့၊ ဖော်မတ်ပြောင်းပြီး စာတန်းထိုးလမ်းကြောင်းများကို စီမံပါ။
ZIP, 7Z, RAR သို့မဟုတ် TAR ကို ဖွင့်၊ ရွေးထားသောအကြောင်းအရာထုတ်ယူပြီး လိုလျှင် ZIP/7Z စကားဝှက်ပါသော ဖိုင်စုအသစ်များ ဖန်တီးပါ။
Base64 သို့မဟုတ် Base32 ကို ကုဒ်ပြောင်း/ဖြည်၊ URL, HTML နှင့် Unicode စာသားကို လွတ်မြောက်သင်္ကေတဖြင့် ရေးပြီး JWT အကြောင်းအရာကို စစ်ပါ။
ဘိုင်နရီ၊ ဒသမနှင့် ဟက်စ်တို့အကြား ကိန်းခြေစနစ်နှင့် တန်ဖိုးများပြောင်း၊ ကိန်းဂဏန်းကို စကားလုံး သို့မဟုတ် စာသားကို ဘိုင်နရီသို့ ပြောင်းပါ။
ရာခိုင်နှုန်းနှင့် အပိုင်းကိန်းတွက်၊ ကိန်းဂဏန်းအချက်အလက်အကျဉ်းချုပ်ပြီး အမှတ်၊ လျှော့စျေး သို့မဟုတ် အချိုးအစားများကို တွက်ပါ။
အွန်လိုင်းနာရီပြ၊ နောက်ပြန်ရေတွက်စက် သို့မဟုတ် အချိန်မှတ်နာရီဖွင့်ပြီး ရက်စွဲ၊ အသက် သို့မဟုတ် အချိန်ဇုန်ကွာခြားမှုကို တွက်ပါ။
သင့် IP နှင့် IPv6 ချိတ်ဆက်မှုစစ်၊ HTTP တောင်းဆိုမှု သို့မဟုတ် HAR ဖိုင်ကို စစ်ပြီး CIDR လိပ်စာအပိုင်းအခြားများကို တွက်ပါ။
အလျား၊ အလေးချိန်၊ အပူချိန်၊ ဒေတာသိုလှောင်မှုနှင့် အခြားယူနစ်များကို ပြောင်းပါ။
HEX, RGB နှင့် HSL တန်ဖိုးများပြောင်း၊ ပုံမှအရောင်ထုတ်၊ အလင်းအမှောင်ခြားနားမှုစစ် သို့မဟုတ် တစ်ရောင်တည်းဖြင့် မျက်နှာပြင်ကို စမ်းပါ။
လင့်ခ်နှင့် Wi-Fi ကွန်ရက်အတွက် QR ကုဒ်များအပါအဝင် QR ကုဒ် သို့မဟုတ် ဘားကုဒ်များကို ဖန်တီးပြီး စကင်ဖတ်ပါ။
ဟက်ရှ်၊ UUID နှင့် စကားဝှက်များဖန်တီး၊ ပုံမှန်ဖော်ပြချက်များစမ်း၊ URL စလပ်များဖန်တီးပြီး ဖိုင်ခွင့်ပြုချက်ကို စစ်ပါ။
စခရင်ပုံသိပ်သည်းမှုနှင့် အသစ်ပြနှုန်းစစ်၊ စခရင်ပေတံဖြင့်တိုင်း၊ ခလုတ်စမ်း သို့မဟုတ် တယ်လီပရွမ့်တာမှ ဖတ်ပါ။
2048၊ မိုင်းရှင်းဂိမ်း၊ ဆူဒိုကု၊ ဂိုမိုကူ၊ တင့်ကားတိုက်ပွဲ