My Natural Language Processing

My NLP Page ကို 2021 ကစပြီး ပြန်လည် အသက်သွင်းပါမယ်။ မည်သူမဆို ဝင်ရောက်ဆွေးနွေး မေးမြန်းတိုင်ပင်နိုင်ပါတယ်။
ဆွေးနွေးချင်တဲ့ မည်သည့်အကြောင်းအရာမဆို AI/NLP/ML/Data Science ပိုင်းတွေကို အဓိက ထားပြီး မျှဝေကြပါမည်။

ဒီပေ့ချ့် မှာ Natural Language Processing နဲ့ ပတ်သတ်ပြီးလာရောက်မျှဝေပေးကြဖို့ လေးစားစွာ ဖိတ်ခေါ်ပါတယ်။ မြန်မာ NLP နဲ့ ပတ်သတ်ပြီး၊ မိမိလေ့လာထားသမျှ၊ ကြိုးပမ်းထားသမျှ၊ သိလိုသမျှကို ပွင့်ပွင့်လင်းလင်း ရိုးရိုးသားသား ဝေမျှ မေးမြန်းနိုင်ပါတယ်။ ကျေးဇူးအထူးတင်ရှိပါသည်။

Burmese Word Segmentation (Part-1)
ပထမဆုံးအနေနဲ့ "word segmentation" ဆိုတာ ဘာလဲဆိုတာကို ဦးစွာ ဆွေးနွေး လိုပါတယ်။
အလွယ်ကူဆုံး အရှင်းဆုံး ပြောရရင်တော့ ဘာသာစကားများတွင် စာရေးသားတဲ့ အခါမှာ ဖတ်ရပိုမိုလွယ်ကူစေရန်နှင့် စကားလုံးများ ရောထွေးမှုမရှိစေရန် အဖြတ်အတောက်များထား၍ ရေးသားကြသည်။ Digital ခေတ်ရောက်လာသောအခါ "space" တစ်ချက်၊ word တစ်လုံးလို့ ဆိုရိုးပြုကြပါတယ်။ နမူနာအားဖြင့် ဂျပန်၊ တရုတ်နှင့် မြန်မာကို ယှဉ်တွဲပြထားပါသည်။
အောက်ပါပုံနှစ်ပုံမှ မြန်မာစာနှင့် ရေးထားသော ပုံထဲမှ စာများ၏ အဖြတ်အတောက်များ ကို real word segmentation လို့ ဆိုနိုင်ပါသလား? ဆိုတာ လက်ဆက်ဆွေးနွေးကြပါစို့။