[ሙዚቃ]
[አስተዋዋቂ] ይህ የህዝብ ሀብት ነው
[ካርል ማሉሙድ] ሰላም ፣ እኔ ካርል ማሙሙድ ነኝ።
ወደ አጠቃላይ ማውጫ እንኳን በደህና መጡ።
እኛ ለእርስዎ ነፃ እና ያልተገደበ እዚህ እናቀርባለን ከ 107 ሚሊዮን የተወሰደ የ n ግራም ስብስብ ይጠቀሙ ፣
233 ሺህ ፣ 728 የመጽሔት መጣጥፎች።
ኤን-ግራም ከአንድ ነጠላ ቃላት ፣ ከሚታወቅ እንደ unigrams ፣ ወደ ሁለት-ቃል ሀረጎች (bigrams)
እስከ 5-ቃል ሐረጎች ፣ 5 ግራም በመባል ይታወቃሉ።
አሉ ፣ ሁሉም ተነግረዋል ፣ 355 ቢሊዮን ረድፎች n-ግራም በዚህ አጠቃላይ ጠቋሚ በዚህ ልቀት ውስጥ ፣ እያንዳንዱ
በመጽሔት ጽሑፍ ውስጥ ከተመታ ጋር ይዛመዳል።
Spacy የሚባል የመሳሪያ መሣሪያ ለማውጣት ጥቅም ላይ ውሏል እኛ የከፈልነው n-ግራም
በአስራ ስድስት ፋይሎች ውስጥ።
ከእያንዳንዱ ረድፍ ጋር የተቆራኘው md5 ሃሽ ነው ፣ እሱም የጋዜጣ ጽሑፍን ይወክላል።
በተጨማሪም ፣ እኛ ተደጋጋሚውን ዘርዝረናል በአንቀጹ ውስጥ n-gram።
እኛ ደግሞ ድግግሞሹን ለመዘርዘር በጊዜ ሂደት ተስፋ እናደርጋለን በአጠቃላይ ኮርፖስ ውስጥ ፣ ተገቢነት መለኪያ
TD/IDF በመባል ይታወቃል።
ከኤን-ግራም በተጨማሪ ፣ አጠቃላይ መረጃ ጠቋሚ ያክን በመጠቀም የወጡ ቁልፍ ቃላትን ይ containsል
የመሳሪያ ስብስብ ።Yake “በጽሑፍ ስታቲስቲክስ ላይ ያርፋል ከነጠላ ሰነዶች የተወሰዱ ባህሪዎች ወደ
የአንድ ጽሑፍ በጣም አስፈላጊ ቁልፍ ቃላትን ይምረጡ።
የአጠቃላይ ጠቋሚ ቁልፍ ቃል ሰንጠረ containsች ይ containsል በድምሩ 19 ቢሊዮን ቁልፍ ቃላት።
በመጨረሻም ፣ አጠቃላይ መረጃ ጠቋሚ ሜታዳታ ይ containsል ሠንጠረዥ ፣ md5 ሃሽ ወደ እንደዚህ ላሉት ዕቃዎች ካርታ
ለመጽሔት ጽሑፍ የ DOI ልዩ አድራሻ ፣ ርዕስ ፣ ደራሲ እና መጽሔት።
ይህ የአጠቃላይ መረጃ ጠቋሚ ቀደም ብሎ መለቀቅ ነው ፣ በሂደት ላይ ያለ ሥራ።
በአንዳንድ ሁኔታዎች የጽሑፍ ማውጣት አልተሳካም።
አንዳንድ ጊዜ ሜታዳታ የለም ፣ ወይም የለም ምናልባትም ትክክል ላይሆን ይችላል።
የታችኛው አስከሬን ትልቅ ቢሆንም ፣ እሱ ነው አልተጠናቀቀም ፣ እና ወቅታዊ አይደለም።
ይህ ሊሻሻል የሚችልባቸው ብዙ መንገዶች አሉ ፣ እና ጄኔራል ለማድረግ በጉጉት እንጠብቃለን
መረጃ ጠቋሚ በጊዜ ሂደት የተሻለ።
አጠቃላይ መረጃ ጠቋሚው በግምት 38 ይይዛል ቴራባይት ውሂብ በፖስትግራግ መልክ
መጣል ፣ ሆኖም ግን በመጭመቅ ፣ ይህ ASCII ውሂብ ወደ 8.5 ቴራባይት ቀንሷል።
ውሂቡን ከዚህ በቀጥታ ማውረድ ይችላሉ ፣ ወይም እንደ bittorrent ያሉ መሳሪያዎችን ይጠቀሙ።
መስተዋቶችን ወይም ሌላ ህዝባዊ ለመፍጠር ነፃነት ይሰማዎ አጠቃላይ መረጃ ጠቋሚውን እንደገና ለማሰራጨት ማከማቻዎች።
ተስፋችን በቁጥር ሊቀመጥ ይችላል የአጠቃቀሞች። እኛ የ Postgres የመረጃ ቋትን እየተጠቀምን ነበር ፣
እና ለመፈለግ አጠቃላይ መረጃ ጠቋሚውን በመጠቀም ከዋና ዝርዝር ውስጥ የዕፅዋት ስሞች።
መረጃ ጠቋሚው ሌላ ለመፈለግ ሊያገለግል ይችላል ነገሮች ፣ እንደ ኬሚካሎች ፣ ጂኖች በተለያዩ
ኮዶች ፣ ፕሮቲኖች ፣ ቁሳቁሶች ፣ የቦታ ስሞች ፣ ወይም ሌሎች አካላት።
ከ Postgres የመረጃ ቋት ይልቅ ፣ ሌሎች ቴክኒኮች ፣ እንደ BERT ፣ በመረጃው ላይ ሊተገበር ይችላል።
ይህ የመፈለጊያ መሣሪያ ፣ የእውቀት መዝገበ ቃላት ፣ ለዕውቀት ካርታ ፣ እኛ የምናምንበት መሣሪያ
ለልምምድ አስፈላጊ ተቋም ነው ሳይንስ በዘመናችን።
ይህ የዕውቀት አጠቃላይ መረጃ ጠቋሚ አያደርግም የታችኛው ኮርፕስ ይገኛል ፣ ይልቁንስ እውነታዎች
ከሬሳ አካል ይወጣሉ።
ይህ አዋቂ ያልሆነ ነው እና የለውጥ አጠቃቀም።
ይህንን እንደ የህዝብ መገልገያ እንመለከተዋለን። እኛ እናረጋግጣለን በአጠቃላይ መረጃ ጠቋሚ ላይ ባለቤትነት የለም።
እሱ ለሕዝብ ጎራ ፣ ለተከታታይ የተሰጠ ነው እርስዎ የማይችሉባቸው ያልተቆጠሩ እውነታዎች
የምትፈልገውን አድርግ።
የተጠበቁ መብቶች የሉም።
በግኝት መንገድ ላይ ያሉ ምሁራን ማማከር ይችላሉ መድረሻዎችን በፍጥነት ለማግኘት ይህ የመንገድ ካርታ
እኛ መጎብኘት ይፈልጋሉ። እኛ በዶክተሮች ውስጥ ነን የዓለም ሰፊ መዛግብት መተላለፊያዎች ፣
የምሁራን እና የሳይንስ ባለሙያዎች የጋራ ማህበረሰብ እና የፈጠራቸው መሐንዲሶች እና አርቲስቶች
እነዚህ የእውቀት ቤተመቅደሶች።
እነዚህ ቤተመቅደሶች ፣ ከአሌክሳንድሪያ ቤተ -መጽሐፍት ወደ አሌክሳንድራ ቤተ -መጽሐፍት ፣ ከመነኮሳት
የአየርላንድ ወደ ሰፊው ዘመናዊ የምርምር ቤተ -መጽሐፍት የዛሬ ፣ ከአረብ እና ከአይሁድ ጸሐፍት
የጥበብን ቤት ለመገንባት በጋራ መሥራት በባግዳድ ውስጥ ወደሚገኙት የእውቀት ፋብሪካዎች
በዘመናዊ ምስራቅ ህንድ የንግድ ቤቶች ውስጥ የኦክስፎርድ እና የካምብሪጅ ማተሚያዎች ፣ እነዚህ
ምሁራን መጎብኘት ያለባቸው መድረሻዎች ናቸው የእጅ ሙያቸውን ለማራመድ ፣ ለመማር
ከእኛ በፊት የመጡትን።
እነዚህ ቤተመቅደሶች የእውቀትን ሁሉ ድምር ይይዛሉ ፣ ግን ያንን እውቀት ማግኘት መቻል አለብን።
አጠቃላይ መረጃ ጠቋሚ ካርታ ነው።
ይህ ለሁሉም የሰው እውቀት ድምር ካርታ አይደለም ፣
ግን እሱ በእርግጠኝነት ትልቅ ንዑስ ክፍል ነው።
ለእውቀት መጨመር እና መስፋፋት ለመቀጠል ፣ በትከሻዎች ላይ ለመቆም ከፈለግን
ግዙፍ ፣ እኛ እነዚህን ካርታዎች ለዚያ ማቅረብ አለብን ሰፊ የሃሳቦች ዓለም።
አጠቃላይ መረጃ ጠቋሚ አንድ መሣሪያ ብቻ ነው ከጊዜ በኋላ በጥራት እንደሚጨምር ተስፋ እናደርጋለን
እና ስፋት ውስጥ ፣ እኛ እንደሚሰጥ ተስፋ የምናደርግ መሣሪያ ጠቃሚ አስተዋፅኦ
ለሳይንስ ልምምድዎ።
ይህንን አጠቃላይ መረጃ ጠቋሚ እርስዎም እንደሚያደርጉት ተስፋ እናደርጋለን አስገራሚ አጠቃቀሞች ፣ እኛ ጠቋሚውን ማድረግ እንደምንችል
የተሻለ ፣ ሌሎች መሳሪያዎችን መፍጠር እንደሚችሉ ፣ ያ የምሁራን ማህበረሰብ በጋራ መስራት ይችላል
ሰፊ ጥልቀቶችን ለማውጣት በጋራ ፍለጋ ውስጥ የዚህ ትምህርት ውቅያኖስ።
አምናለሁ ፣ ሁላችንም አንድ ግብ እናጋራለን ፣ የጋራ ተስፋ።
እንደ ሳይንቲስቶች ፣ ምሁራን ፣ አርቲስቶች ፣ ጸሐፊዎች ፣ እንደ ዓለም ዜጎች ፣ ልጆች እንደሚመኙ
ለመማር ፣ እንደ ጉጉት የሰው ልጅ ፣ አምናለሁ ሁላችንም መጨመር እና መስፋፋት ተስፋ እናደርጋለን
የእውቀት ዓለማችንን የተሻለ ያደርጋታል ቦታችን ፣ የእኛን እንድንረዳ ይረዳናል
ዓለምን ፣ በሽታን እና ድህነትን ለመፈወስ ፣ ለማራመድ የሳይንስ እና ንግድ እድገት እና እ.ኤ.አ.
ሰብአዊነት እና ጥበባት።
ሳይንስ ሁላችንም መናገር ካለብን ቋንቋ ነው እኛ ዓለማችንን ማሻሻል አለብን።
ስላዳመጡ እናመሰግናለን።
[ማኅተሙ ይጮኻል]
[ሙዚቃ]