[ဂီတ]
[ကြေညာသူ] ဒါကပြည်သူ့အရင်းအမြစ်ပါ
[Carl Malamud] မင်္ဂလာပါ၊ ငါ Carl Malamud
အထွေထွေအညွှန်းမှကြိုဆိုပါသည်။
ငါတို့သည်သင်တို့အခမဲ့နှင့်အကန့်အသတ်ဖြင့်ဤနေရာတွင်တင်ပြသည် ၁၀၇ သန်းမှထုတ်ယူထားသော n-grams အစုံကိုသုံးပါ။
ဂျာနယ်ပေါင်း ၂၃၃, ၇၂၈
n ဂရမ်သည်သိပြီးသားစကားလုံးများမှဖြစ်သည် unigrams အဖြစ်စကားလုံးနှစ်လုံးပါစာပိုဒ်များ (bigrams)
၅ ဂရမ်ဟုခေါ်သောစကားလုံး ၅ လုံးအထိ
n- ဂရမ်အတန်း ၃၅၅ ဘီလျံရှိသည် ဤအညွှန်းကိန်းတစ်ခုစီကိုထုတ်ပြန်ရာတွင်
ဂျာနယ်တစ်ခုရဲ့ဆောင်းပါးတစ်ပုဒ်နဲ့တိုက်ဆိုင်နေပါတယ်။
Spacy ဟုခေါ်သောကိရိယာတန်ဆာပလာတစ်ခုကိုထုတ်ယူရန်အသုံးပြုခဲ့သည် n ခွဲထားသောဂရမ်
ဆယ့်ခြောက်ဖိုင်တွင်
အတန်းတစ်ခုစီနှင့်ဆက်နွယ်နေသော md5 hash တစ်ခုဖြစ်သည် ဂျာနယ်ဆောင်းပါးတစ်ပုဒ်ကိုကိုယ်စားပြုသည်။
ထို့အပြင်ကျွန်ုပ်တို့၏ကြိမ်နှုန်းကိုစာရင်းပြုစုသည် ဆောင်းပါး၌ n-gram
ကြိမ်နှုန်းကိုစာရင်းပြုစုရန်လည်းအချိန်နှင့်အမျှကျွန်ုပ်တို့မျှော်လင့်ပါသည် ယေဘူယျအားဖြင့် corpus၊ ဆက်စပ်မှုမက်ထရစ်
TD/IDF ဟုခေါ်သည်။
n-grams အပြင် General Index Yake ကို သုံး၍ ထုတ်ယူထားသောသော့ချက်စာလုံးများပါ ၀ င်သည်
toolkit.Yake“ စာသားစာရင်းအင်းပေါ်မှာမူတည်တယ် စာရွက်စာတမ်းတစ်ခုတည်းမှထုတ်ယူထားသောအင်္ဂါရပ်များ
စာတစ်စောင်၏အရေးကြီးဆုံးသော့ချက်စာလုံးများကိုရွေးပါ။ ”
ယေဘူယျအညွှန်းသော့ချက်စာလုံးဇယားများပါ ၀ င်သည် စုစုပေါင်းသော့ချက်စာလုံး ၁၉ ဘီလီယံ
နောက်ဆုံးအနေနှင့်ယေဘူယျအညွှန်းတွင် metadata တစ်ခုပါ ၀ င်သည် table မှ md5 hash ကိုဤကဲ့သို့သောအရာများသို့ပုံဖော်ပါ
ဂျာနယ်ဆောင်းပါးတစ်ပုဒ်အတွက် DOI ၏ထူးခြားသောလိပ်စာ ခေါင်းစဉ်၊ စာရေးဆရာနှင့်ဂျာနယ်
၎င်းသည်ယေဘူယျအညွှန်းကိုစောစောစီးစီးထုတ်ပြန်ခြင်းဖြစ်သည်၊ လုပ်ဆောင်နေသည်။
အချို့ကိစ္စများတွင်စာသားထုတ်ယူခြင်းမအောင်မြင်ပါ။
တခါတရံမှာ metadata ကိုမရနိုင်ပါ၊ သို့မဟုတ် မမှန်တာတောင်ဖြစ်နိုင်တယ်။
အရင်းခံခန္ဓာသည်ကြီးမားသော်လည်း၎င်းသည် မပြည့်စုံပါ၊ နောက်ဆုံးပေါ်မဟုတ်ပါ။
ဒါကိုတိုးတက်အောင်လုပ်နိုင်တဲ့နည်းလမ်းတွေအများကြီးရှိတယ်၊ ငါတို့ဗိုလ်ချုပ်ကိုမျှော်လင့်တယ်
အချိန်နှင့်အမျှအညွှန်းကိန်းပိုကောင်းလာသည်။
ယေဘူယျအညွှန်းမှာခန့်မှန်းခြေအားဖြင့် ၃၈ ဖြစ်သည် Postgres ပုံစံဖြင့် terabytes ဒေတာ
ချုံ့ခြင်း၊ သို့သော်ဤ ASCII ကိုစွန့်ပစ်ပါ data ကို 8.5 terabytes သို့လျှော့ချသည်။
ဒေတာတွေကိုဒီကနေတိုက်ရိုက် download လုပ်နိုင်ပါတယ်၊ သို့မဟုတ် bittorrent ကဲ့သို့သောကိရိယာများကိုသုံးပါ။
ကြေးမုံ (သို့) အခြားလူထုဖန်တီးရန်အခမဲ့ခံစားရသည် အထွေထွေအညွှန်းကိုပြန်လည်ဖြန့်ဝေရန် repositories များ။
ငါတို့ရဲ့မျှော်လင့်ချက်ကအဲဒါကိုနံပါတ်တစ်ခုနဲ့ထားနိုင်တယ် အသုံးပြုမှုများ ကျွန်ုပ်တို့သည် Postgres database ကိုသုံးနေခဲ့သည်။
ရှာဖွေရန်ယေဘူယျအညွှန်းကိုသုံးသည် မာစတာစာရင်းမှအပင်အမည်များ
အခြားအညွှန်းကိုရှာဖွေရန်သုံးနိုင်သည် ဓာတုပစ္စည်းများကဲ့သို့အရာဝတ္ထုအမျိုးမျိုး၌မျိုးဗီဇများရှိသည်
encodings, ပရိုတိန်း, ပစ္စည်းများ, နေရာအမည်များ, သို့မဟုတ်အခြားအဖွဲ့အစည်းများ
Postgres database အစားအခြားနည်းစနစ်များ၊ BERT ကဲ့သို့ဒေတာကိုအသုံးချနိုင်သည်။
၎င်းသည်ရှာဖွေရေးကိရိယာတစ်ခု၊ ဗဟုသုတအဘိဓာန်ဖြစ်သည်၊ ဗဟုသုတအတွက်မြေပုံ၊ ငါတို့ယုံကြည်တဲ့ကိရိယာတစ်ခု
လေ့ကျင့်မှုအတွက်မရှိမဖြစ်လိုအပ်သောအရာဖြစ်သည် ငါတို့ခေတ်မှာသိပ္ပံပညာ
ဒီယေဘူယျအညွှန်းကိုဗဟုသုတဖြစ်အောင်လုပ်မပေးဘူး ရရှိနိုင်သောအရင်းခံခန္ဓာ၊ အစား၊ အချက်အလက်များ
corpus မှထုတ်ယူသည်။
ဒါကစွဲလမ်းခြင်းမရှိသောအရာဖြစ်သည် နှင့်အသွင်ပြောင်းအသုံးချခြင်း
ကျွန်ုပ်တို့သည်ဤအရာကိုအများသုံးပစ္စည်းတစ်ခုအဖြစ်ကျွန်ုပ်တို့ရှုမြင်သည် ယေဘူယျအညွှန်းကိုပိုင်ဆိုင်မှုမရှိပါ။
၎င်းသည်အများပြည်သူအတွက်ရည်စူးထားသောစီးရီးတစ်ခုဖြစ်သည် သင်မလုပ်နိုင်သောအကန့်အသတ်မရှိသောအချက်များ
သင်အလိုရှိရာကိုလုပ်ပါ။
ဘာအခွင့်အရေးမှမရှိပါဘူး။
ရှာဖွေတွေ့ရှိရန်လမ်းခရီးတွင်ပညာရှင်များသည်ဆွေးနွေးတိုင်ပင်နိုင်ပါသည် ပိုမိုလျင်မြန်သော ဦး တည်ရာများကိုရှာဖွေရန်ဤလမ်းပြမြေပုံ
သူတို့ကအလည်လာဖို့ဆန္ဒရှိပါတယ် ကမ္ဘာကြီးရဲ့မော်ကွန်းတိုက်ကြီးရဲ့စင်္ကြံများ၊
ပညာရှင်များနှင့်သိပ္ပံပညာရှင်များစုပေါင်းထားသောအသိုင်းအဝိုင်း ဖန်တီးခဲ့သောအင်ဂျင်နီယာများနှင့်အနုပညာရှင်များ
ဤအသိပညာဗိမာန်များ
အလက်ဇန္ဒြီးယားစာကြည့်တိုက်မှဤဘုရားကျောင်းများ သံfromာများမှ Alexandra စာကြည့်တိုက်သို့
အိုင်ယာလန်မှခေတ်မီသုတေသနစာကြည့်တိုက်ကြီးများသို့ ယနေ့အာရပ်နှင့်ဂျူးကျမ်းပြုဆရာများမှ
Wisdom အိမ်တည်ဆောက်ရန်အတူတကွပူးပေါင်းလုပ်ဆောင်သည် ဘဂ္ဂဒက်တွင်တည်ရှိသောအသိပညာစက်ရုံများသို့
ခေတ်သစ်အရှေ့အိန္ဒိယကုန်သွယ်အိမ်များကဲ့သို့ အောက်စဖို့ဒ်နှင့်ကိန်းဘရစ်၊
ပညာရှင်တွေသွားလည်သင့်တဲ့နေရာတွေပဲ သူတို့၏လက်မှုပညာကိုတိုးတက်စေရန်၊ သင်ယူရန်
ငါတို့ရှေ့မှာလာတဲ့သူတွေ
ဒီဘုရားကျောင်းတွေမှာဗဟုသုတအားလုံးရဲ့ပေါင်းလဒ်ပါဝင်ပါတယ် ဒါပေမယ့်ငါတို့ဒီဗဟုသုတကိုရှာနိုင်ရမယ်။
ယေဘူယျအညွှန်းသည်မြေပုံတစ်ခုဖြစ်သည်။
ဤအရာသည်လူသားအားလုံး၏ဗဟုသုတပေါင်းလဒ်အတွက်မြေပုံမဟုတ်ပါ၊
သို့သော်၎င်းသည်သိသာထင်ရှားသည့်အစုခွဲတစ်ခုဖြစ်သည်။
အသိပညာတိုးပွားခြင်းနှင့်ပျံ့နှံ့ခြင်းတို့အတွက်ဖြစ်သည် ငါတို့ပခုံးပေါ်မှာရပ်ရင်ဆက်လုပ်ဖို့
ဘီလူးကြီးတွေရဲ့ဒီမြေပုံတွေကိုငါတို့ပေးရမယ် ကြီးမားသောစိတ်ကူးကမ္ဘာ
ယေဘူယျအညွှန်းသည်ကိရိယာတစ်ခု၊ ကိရိယာတစ်ခုသာဖြစ်သည် အချိန်ကြာလာတာနဲ့အမျှအရည်အသွေးတိုးတက်လာလိမ့်မယ်လို့ငါတို့မျှော်လင့်တယ်
အတိုင်းအတာတစ်ခုအထိငါတို့ပေးလိမ့်မယ်လို့မျှော်လင့်တဲ့ကိရိယာတစ်ခု အသုံးဝင်သောပံ့ပိုးမှု
မင်းရဲ့သိပ္ပံပညာကျင့်စဉ်အတွက်
မင်းလည်းဒီယေဘူယျအညွှန်းကိုထည့်လိမ့်မယ်လို့ငါတို့မျှော်လင့်တယ် အံ့သြဖွယ်အသုံးပြုမှုများ၊ အညွှန်းကိုကျွန်ုပ်တို့ပြုလုပ်နိုင်သည်
ပိုကောင်းတာပေါ့၊ မင်းကအခြား tools တွေကိုဖန်တီးနိုင်တယ် ပညာရှင်အသိုင်းအဝိုင်းသည်အတူတကွလုပ်ဆောင်နိုင်သည်
ကျယ်ပြန့်နက်ရှိုင်းသောအရာများကိုတူးဖော်ရန်ဘုံရှာဖွေမှုတစ်ခုတွင် ဤသမုဒ္ဒရာ၏သင်ယူမှု
ငါတို့အားလုံးတူညီတဲ့ပန်းတိုင်ကိုငါယုံကြည်တယ်၊ ဘုံမျှော်လင့်ချက်
သိပ္ပံပညာရှင်များ၊ ပညာရှင်များ၊ အနုပညာရှင်များ၊ စာရေးဆရာများအနေနှင့် ကလေးတွေဆန္ဒရှိတဲ့အတိုင်းကမ္ဘာ့နိုင်ငံသားတွေပါ
စူးစမ်းလိုစိတ်ရှိသောလူသားများအနေနှင့်ကျွန်ုပ်သင်ယူသည် တိုးပွါးခြင်းနှင့်ပျံ့နှံ့ခြင်းကိုငါတို့အားလုံးမျှော်လင့်ပါတယ်
အသိပညာဗဟုသုတကငါတို့ကမ္ဘာကြီးကိုပိုကောင်းအောင်လုပ်လိမ့်မယ် နေရာကအဲဒါကငါတို့ကိုနားလည်ဖို့ကူညီလိမ့်မယ်
ရောဂါ၊ ဆင်းရဲမွဲတေမှုကိုကုစားရန်ကမ္ဘာကြီးကိုရှေ့တိုးရန် သိပ္ပံနှင့်ကူးသန်းရောင်းဝယ်ရေးတိုးတက်မှုနှင့်
လူသားနှင့်အနုပညာ
သိပ္ပံသည်ကျွန်ုပ်တို့အားလုံးပြောဆိုရမည့်ဘာသာစကားတစ်ခုဖြစ်သည် ငါတို့ကငါတို့ကမ္ဘာကြီးကိုပိုကောင်းအောင်လုပ်ရမယ်။
နားထောင်ပေးတဲ့အတွက်ကျေးဇူးတင်ပါတယ်။
[တံဆိပ်သည်ဟောင်နေသည်]
[ဂီတ]