[តន្ត្រី]
[អ្នកប្រកាស] នេះគឺជាធនធានសាធារណៈ
[Carl Malamud] សួស្តីខ្ញុំឈ្មោះ Carl Malamud
សូមស្វាគមន៍មកកាន់សន្ទស្សន៍ទូទៅ។
យើងធ្វើបទបង្ហាញនៅទីនេះដោយឥតគិតថ្លៃនិងគ្មានដែនកំណត់របស់អ្នក ប្រើសំណុំអិនក្រាមដកស្រង់ចេញពី ១០៧ លាន
អត្ថបទកាសែតចំនួន ២៣៣ ពាន់ ៧២៨ ។
n ក្រាមមានចាប់ពីពាក្យតែមួយដែលគេស្គាល់ ដូចជា unigrams ទៅឃ្លាពីរពាក្យ (bigrams)
រហូតដល់ ៥ ពាក្យដែលត្រូវបានគេស្គាល់ថា ៥ ក្រាម។
មានអ្វីទាំងអស់ដែលបានប្រាប់គឺ ៣៥៥ ពាន់លានជួរ n ក្រាម នៅក្នុងការចេញផ្សាយសន្ទស្សន៍ទូទៅនេះនីមួយៗ
ត្រូវគ្នាទៅនឹងអត្ថបទមួយនៅក្នុងទស្សនាវដ្តី
ប្រអប់ឧបករណ៍មួយដែលមានឈ្មោះថា Spacy ត្រូវបានប្រើដើម្បីស្រង់ចេញ n ក្រាមដែលយើងបានបែងចែក
ឆ្លងកាត់ឯកសារចំនួន ១៦ ។
ភ្ជាប់ជាមួយជួរដេកនីមួយៗគឺមេឌី ៥ ហាសដែល តំណាងឱ្យអត្ថបទកាសែត។
លើសពីនេះយើងរាយប្រេកង់របស់អេ n-ក្រាមនៅក្នុងអត្ថបទ។
យើងសង្ឃឹមថាយូរ ៗ ទៅនឹងចុះបញ្ជីប្រេកង់ផងដែរ នៅក្នុងតួទូទៅគឺជាសូចនាករពាក់ព័ន្ធ
ត្រូវបានគេស្គាល់ថា TD/IDF
បន្ថែមពីលើក្រាមក្រាមសន្ទស្សន៍ទូទៅ មានពាក្យគន្លឹះស្រង់ចេញដោយប្រើយ៉ាក
toolkit.Yake“ ពឹងផ្អែកលើស្ថិតិអត្ថបទ លក្ខណៈពិសេសដែលបានស្រង់ចេញពីឯកសារតែមួយទៅ
ជ្រើសរើសពាក្យគន្លឹះសំខាន់បំផុតនៃអត្ថបទ។ ”
តារាងពាក្យគន្លឹះសន្ទស្សន៍ទូទៅមាន ពាក្យគន្លឹះសរុបចំនួន ១៩ ពាន់លាន។
ចុងក្រោយសន្ទស្សន៍ទូទៅមានទិន្នន័យមេតា តារាងគូសផែនទី md5 hash ទៅនឹងរបស់របរបែបនេះ
អាសយដ្ឋានតែមួយគត់របស់ DOI សម្រាប់អត្ថបទទស្សនាវដ្តី ចំណងជើងអ្នកនិពន្ធនិងទស្សនាវដ្តី។
នេះគឺជាការចេញផ្សាយដំបូងនៃសន្ទស្សន៍ទូទៅ ការងារកំពុងដំណើរការ។
ក្នុងករណីខ្លះការទាញយកអត្ថបទបានបរាជ័យ។
ពេលខ្លះទិន្នន័យមេតាមិនមានឬមិនមាន ប្រហែលជាសូម្បីតែមិនត្រឹមត្រូវ
ខណៈពេលដែលសរីរាង្គខាងក្រោមមានទំហំធំវាមាន មិនពេញលេញនិងមិនទាន់សម័យ។
មានវិធីជាច្រើនដែលអាចធ្វើឱ្យប្រសើរឡើងនេះ ហើយយើងទន្ទឹងរង់ចាំបង្កើតឧត្តមសេនីយ៍
សន្ទស្សន៍ល្អប្រសើរតាមពេលវេលា។
សន្ទស្សន៍ទូទៅមានប្រមាណ ៣៨ តេរ៉ាបៃនៃទិន្នន័យនៅក្នុងទំរង់ Postgres
ទោះយ៉ាងណាក៏ដោយជាមួយនឹងការបង្ហាប់ ASCII នេះ ទិន្នន័យត្រូវបានកាត់បន្ថយមកត្រឹម ៨.៥ តេរ៉ាបៃ
អ្នកអាចទាញយកទិន្នន័យដោយផ្ទាល់ពីទីនេះ ឬប្រើឧបករណ៍ដូចជាប៊ីតធ័រ
មានអារម្មណ៍សេរីដើម្បីបង្កើតកញ្ចក់ឬសាធារណៈផ្សេងទៀត ឃ្លាំងដើម្បីចែកចាយលិបិក្រមទូទៅឡើងវិញ។
ក្តីសង្ឃឹមរបស់យើងគឺថាវាអាចត្រូវបានគេដាក់លេខ នៃការប្រើប្រាស់។ យើងបានប្រើប្រាស់មូលដ្ឋានទិន្នន័យ Postgres
ហើយប្រើលិបិក្រមទូទៅដើម្បីស្វែងរក ឈ្មោះរុក្ខជាតិពីបញ្ជីមេ។
សន្ទស្សន៍អាចត្រូវបានប្រើដើម្បីស្វែងរកផ្សេងទៀត វត្ថុដូចជាសារធាតុគីមីហ្សែនផ្សេងៗ
ការអ៊ិនកូដ, ប្រូតេអ៊ីន, សំភារៈ, ឈ្មោះទីកន្លែង, ឬអង្គភាពផ្សេងទៀត។
ជំនួសឱ្យមូលដ្ឋានទិន្នន័យ Postgres បច្ចេកទេសផ្សេងទៀត ដូចជា BERT អាចត្រូវបានអនុវត្តចំពោះទិន្នន័យ។
នេះគឺជាឧបករណ៍ស្វែងរកដែលជាវចនានុក្រមចំណេះដឹង ផែនទីចំណេះដឹងគឺជាឧបករណ៍ដែលយើងជឿជាក់
គឺជាសម្ភារៈចាំបាច់សម្រាប់ការអនុវត្ត វិទ្យាសាស្ត្រក្នុងយុគសម័យទំនើបរបស់យើង
សន្ទស្សន៍ទូទៅនេះចំពោះចំណេះដឹងមិនបង្កើតទេ សាកសពដែលអាចរកបាន, ជាការពិត
ត្រូវបានស្រង់ចេញពីសាកសព។
នេះគឺជាការមិនប្រកាន់ខ្ជាប់ និងការប្រើប្រាស់ផ្លាស់ប្តូរ។
យើងចាត់ទុកនេះជាឧបករណ៍សាធារណៈ គ្មានកម្មសិទ្ធិលើសន្ទស្សន៍ទូទៅ
វាត្រូវបានឧទ្ទិសដល់ដែនសាធារណៈដែលជាស៊េរី នៃការពិតដែលមិនកំណត់ដែលអ្នកអាចធ្វើបាន
ធ្វើអ្វីដែលអ្នកចង់បាន។
មិនមានសិទ្ធិរក្សាសិទ្ធិឡើយ។
អ្នកប្រាជ្ញនៅលើផ្លូវឆ្ពោះទៅរករបកគំហើញអាចពិគ្រោះយោបល់ ផែនទីបង្ហាញផ្លូវនេះដើម្បីស្វែងរកគោលដៅបានលឿន
ពួកគេចង់មកលេងយើង សាលធំនៃបណ្ណសារដ៏ធំនៃពិភពលោក
សហគមន៍អ្នកសិក្សានិងអ្នកវិទ្យាសាស្ត្ររួម និងវិស្វករនិងសិល្បករដែលបានបង្កើត
ប្រាសាទនៃចំណេះដឹងទាំងនេះ។
ប្រាសាទទាំងនេះមកពីបណ្ណាល័យអាឡិចសាន់ឌឺ ទៅបណ្ណាល័យអាឡិចសាន់ត្រាពីព្រះសង្ឃ
អៀរឡង់ទៅកាន់បណ្ណាល័យស្រាវជ្រាវទំនើបដ៏ធំ សព្វថ្ងៃនេះពីពួកអាចារ្យអារ៉ាប់និងជ្វីហ្វ
ធ្វើការរួមគ្នាដើម្បីកសាងផ្ទះប្រាជ្ញា នៅទីក្រុងបាកដាដទៅកាន់រោងចក្រនៃចំណេះដឹង
នៅក្នុងផ្ទះពាណិជ្ជកម្មឥណ្ឌាខាងកើតសម័យទំនើបដូចជា សារព័ត៌មានរបស់ Oxford និង Cambridge ទាំងនេះ
គឺជាទិសដៅដែលអ្នកប្រាជ្ញត្រូវទៅទស្សនា ដើម្បីជំរុញសិប្បកម្មរបស់ពួកគេរៀនពី
អ្នកដែលមកមុនយើង
ប្រាសាទទាំងនេះមានចំនួនសរុបនៃចំណេះដឹងទាំងអស់ ប៉ុន្តែយើងត្រូវតែអាចស្វែងរកចំណេះដឹងនោះ។
សន្ទស្សន៍ទូទៅគឺជាផែនទី។
នេះមិនមែនជាផែនទីសរុបនៃចំនេះដឹងទាំងអស់របស់មនុស្សទេ
ប៉ុន្តែវាពិតជាសំណុំរង
សម្រាប់ការបង្កើននិងការផ្សព្វផ្សាយចំណេះដឹង ដើម្បីបន្តប្រសិនបើយើងឈរនៅលើស្មា
នៃក្រុមហ៊ុនយក្សយើងត្រូវតែផ្តល់ផែនទីទាំងនេះដល់វា ពិភពគំនិតដ៏ធំទូលាយ។
សន្ទស្សន៍ទូទៅគឺគ្រាន់តែជាឧបករណ៍មួយដែលជាឧបករណ៍មួយ ដែលយើងសង្ឃឹមថាយូរ ៗ ទៅនឹងទទួលបានគុណភាព
ហើយនៅក្នុងវិសាលភាពឧបករណ៍ដែលយើងសង្ឃឹមថានឹងផ្តល់ជូន ការរួមចំណែកដ៏មានប្រយោជន៍
ចំពោះការអនុវត្តវិទ្យាសាស្ត្ររបស់អ្នក។
យើងសង្ឃឹមថាអ្នកនឹងដាក់សន្ទស្សន៍ទូទៅនេះផងដែរ ការប្រើប្រាស់គួរឱ្យភ្ញាក់ផ្អើលដែលយើងអាចបង្កើតលិបិក្រម
កាន់តែប្រសើរដែលអ្នកអាចបង្កើតឧបករណ៍ផ្សេងទៀត សហគមន៍អ្នកសិក្សាអាចធ្វើការជាមួយគ្នា
នៅក្នុងដំណើរស្វែងរករួមគ្នាដើម្បីជីកយកជម្រៅដ៏ធំ នៃមហាសមុទ្រនៃការរៀនសូត្រនេះ។
ខ្ញុំជឿថាយើងទាំងអស់គ្នាមានគោលដៅរួម ក្តីសង្ឃឹមរួម
ក្នុងនាមជាអ្នកវិទ្យាសាស្ត្រអ្នកប្រាជ្ញសិល្បករអ្នកនិពន្ធ ក្នុងនាមជាពលរដ្ឋនៃពិភពលោកដូចកុមារប្រាថ្នា
ខ្ញុំជឿថាជាមនុស្សដែលចង់ដឹងចង់រៀន យើងទាំងអស់គ្នាសង្ឃឹមថាការកើនឡើងនិងការសាយភាយ
ចំណេះដឹងនឹងធ្វើឱ្យពិភពលោកយើងកាន់តែប្រសើរឡើង កន្លែងដែលវានឹងជួយយើងឱ្យយល់ពីរបស់យើង
ពិភពលោកដើម្បីព្យាបាលជំងឺនិងភាពក្រីក្រដើម្បីឆ្ពោះទៅមុខ វឌ្នភាពនៃវិទ្យាសាស្ត្រនិងពាណិជ្ជកម្មនិង
មនុស្សធម៌និងសិល្បៈ។
វិទ្យាសាស្រ្តគឺជាភាសាមួយដែលយើងទាំងអស់គ្នាត្រូវតែនិយាយប្រសិនបើ យើងចង់ធ្វើឱ្យពិភពលោករបស់យើងប្រសើរឡើង
អរគុណ​ដែល​បាន​ស្តាប់។
[ត្រាកំពុងព្រុស]
[តន្ត្រី]