[இசை]
[அறிவிப்பாளர்] இது பொது வளம்
[கார்ல் மலமுட்] வணக்கம், நான் கார்ல் மலமுட்.
பொது அட்டவணைக்கு வரவேற்கிறோம்.
உங்கள் இலவசம் மற்றும் வரம்பற்றதுக்காக நாங்கள் இங்கு வழங்குகிறோம் 107 மில்லியனில் இருந்து பிரித்தெடுக்கப்பட்ட என்-கிராம் தொகுப்பைப் பயன்படுத்தவும்,
233 ஆயிரம், 728 பத்திரிகை கட்டுரைகள்.
ஒற்றை வார்த்தைகளிலிருந்து n- கிராம் வரம்பானது அறியப்படுகிறது யூனிகிராம்களாக, இரண்டு வார்த்தை சொற்றொடர்களுக்கு (பிக்ராம்ஸ்)
5-கிராம் சொற்றொடர்கள், 5-கிராம் என அறியப்படுகிறது.
355 பில்லியன் வரிசைகள் என்-கிராம் உள்ளன பொது குறியீட்டின் இந்த வெளியீட்டில், ஒவ்வொன்றும்
ஒரு பத்திரிகை கட்டுரையில் ஒரு வெற்றிக்கு தொடர்புடையது.
ஸ்பேசி என்ற கருவித்தொகுப்பு பிரித்தெடுக்க பயன்படுத்தப்பட்டது நாம் பிரித்திருக்கும் n- கிராம்
பதினாறு கோப்புகள் முழுவதும்.
ஒவ்வொரு வரிசையுடனும் தொடர்புடையது md5 ஹாஷ் ஆகும் ஒரு பத்திரிகை கட்டுரையை பிரதிபலிக்கிறது.
கூடுதலாக, அதன் அதிர்வெண்ணை நாங்கள் பட்டியலிடுகிறோம் கட்டுரையில் n- கிராம்.
காலப்போக்கில் அதிர்வெண்ணையும் பட்டியலிடுவோம் என்று நம்புகிறோம் ஒட்டுமொத்த கார்பஸில், ஒரு தொடர்புடைய மெட்ரிக்
TD/IDF என அறியப்படுகிறது.
N- கிராம், பொது குறியீடு யேக்கைப் பயன்படுத்தி பிரித்தெடுக்கப்பட்ட முக்கிய வார்த்தைகள் உள்ளன
கருவித்தொகுப்பு. யேகே "உரை புள்ளிவிவரத்தில் தங்கியுள்ளது ஒற்றை ஆவணங்களிலிருந்து பிரித்தெடுக்கப்பட்ட அம்சங்கள்
உரையின் மிக முக்கியமான சொற்களைத் தேர்ந்தெடுக்கவும்.
பொதுவான குறியீட்டு முக்கிய அட்டவணைகள் உள்ளன மொத்தம் 19 பில்லியன் முக்கிய வார்த்தைகள்.
கடைசியாக, பொது குறியீட்டில் ஒரு மெட்டாடேட்டா உள்ளது அட்டவணை, md5 ஹாஷ் போன்ற பொருட்களுக்கு மேப்பிங்
ஒரு பத்திரிகை கட்டுரைக்கான DOI தனிப்பட்ட முகவரி, தலைப்பு, ஆசிரியர் மற்றும் பத்திரிகை.
இது பொது குறியீட்டின் ஆரம்ப வெளியீடு, ஒரு வேலை நடந்து கொண்டிருக்கிறது.
சில சந்தர்ப்பங்களில், உரை பிரித்தெடுத்தல் தோல்வியடைந்தது.
சில நேரங்களில், மெட்டாடேட்டா கிடைக்காது அல்லது இல்லை ஒருவேளை கூட தவறானது.
அடிப்படை கார்பஸ் பெரியதாக இருந்தாலும், அது முழுமையாக இல்லை, மேலும் புதுப்பித்த நிலையில் இல்லை.
இதை மேம்படுத்த பல வழிகள் உள்ளன, நாங்கள் ஜெனரலை உருவாக்க காத்திருக்கிறோம்
காலப்போக்கில் சிறந்த குறியீட்டு.
பொது குறியீடு சுமார் 38 ஆக்கிரமித்துள்ளது போஸ்ட்கிரெஸ் வடிவத்தில் டெராபைட் தரவு
திணிப்பு, எனினும் சுருக்கத்துடன், இந்த ASCII தரவு 8.5 டெராபைட்டுகளாக குறைக்கப்படுகிறது.
தரவை இங்கிருந்து நேரடியாக பதிவிறக்கம் செய்யலாம், அல்லது bittorrent போன்ற கருவிகளைப் பயன்படுத்துங்கள்.
கண்ணாடிகள் அல்லது பிற பொது உருவாக்க தயங்க பொது குறியீட்டை மறுபகிர்வு செய்ய களஞ்சியங்கள்.
எங்கள் எண்ணம் அதை ஒரு எண்ணில் வைக்கலாம் பயன்களின். நாங்கள் Postgres தரவுத்தளத்தைப் பயன்படுத்துகிறோம்,
மற்றும் தேட பொது குறியீட்டைப் பயன்படுத்துதல் முதன்மை பட்டியலில் இருந்து தாவரங்களின் பெயர்கள்.
மற்றவர்களைத் தேட குறியீட்டைப் பயன்படுத்தலாம் இரசாயனங்கள், பல்வேறு மரபணுக்கள் போன்ற பொருள்கள்
குறியீடுகள், புரதங்கள், பொருட்கள், இடப் பெயர்கள், அல்லது பிற நிறுவனங்கள்.
Postgres தரவுத்தளத்திற்கு பதிலாக, மற்ற நுட்பங்கள், BERT போன்றவற்றை தரவுகளுக்குப் பயன்படுத்தலாம்.
இது ஒரு தேடல் கருவி, அறிவு அகராதி, அறிவுக்கு ஒரு வரைபடம், நாம் நம்பும் ஒரு கருவி
பயிற்சிக்கு இன்றியமையாத வசதி நமது நவீன யுகத்தில் அறிவியல்.
அறிவுக்கான இந்த பொதுவான குறியீடானது உருவாக்கப்படவில்லை அடிப்படை கார்பஸ் கிடைக்கிறது, மாறாக, உண்மைகள்
கார்பஸிலிருந்து பிரித்தெடுக்கப்படுகின்றன.
இது இணக்கமற்றது மற்றும் உருமாற்ற பயன்பாடு.
நாங்கள் இதை ஒரு பொது பயன்பாடாக பார்க்கிறோம். நாங்கள் வலியுறுத்துகிறோம் பொது குறியீட்டின் மீது உரிமை இல்லை.
இது பொது டொமைன், ஒரு தொடருக்கு அர்ப்பணிக்கப்பட்டுள்ளது பாதுகாப்பற்ற உண்மைகளை உங்களால் முடியும்
நீங்கள் என்ன செய்ய வேண்டும்.
எந்த உரிமைகளும் பாதுகாக்கப்படவில்லை.
கண்டுபிடிப்பதற்கான பாதையில் உள்ள அறிஞர்கள் கலந்தாலோசிக்கலாம் இலக்குகளை விரைவாகக் கண்டறிய இந்த வரைபடம்
அவர்கள் பார்வையிட விரும்புகிறார்கள் உலகின் பரந்த காப்பகங்களின் மண்டபங்கள்,
அறிஞர்கள் மற்றும் விஞ்ஞானிகளின் கூட்டு சமூகம் மற்றும் உருவாக்கிய பொறியாளர்கள் மற்றும் கலைஞர்கள்
இந்த அறிவு கோவில்கள்.
இந்த கோவில்கள், அலெக்ஸாண்ட்ரியா நூலகத்திலிருந்து துறவிகளிடமிருந்து அலெக்ஸாண்ட்ரா நூலகத்திற்கு
அயர்லாந்தின் பரந்த நவீன ஆராய்ச்சி நூலகங்கள் இன்றைய அரபு மற்றும் யூத எழுத்தாளர்களிடமிருந்து
ஞான மாளிகையை உருவாக்க ஒன்றாக வேலை செய்கிறோம் பாக்தாத்தில் அறிவு தொழிற்சாலைகளுக்கு
நவீன கிழக்கிந்திய வர்த்தக நிறுவனங்களில் ஆக்ஸ்போர்டு மற்றும் கேம்பிரிட்ஜ் அச்சகங்கள், இவை
அறிஞர்கள் கட்டாயம் பார்க்க வேண்டிய இடங்கள் அவர்களின் கைவினைகளை முன்னேற்ற, கற்றுக்கொள்ள
எங்களுக்கு முன் வந்தவை.
இந்த கோவில்கள் அனைத்து அறிவின் கூட்டுத்தொகையைக் கொண்டுள்ளன. ஆனால் அந்த அறிவை நாம் கண்டுபிடிக்க வேண்டும்.
பொது குறியீடு ஒரு வரைபடம்.
இது அனைத்து மனித அறிவின் மொத்த வரைபடம் அல்ல,
ஆனால் அது நிச்சயமாக ஒரு கணிசமான துணைக்குழு ஆகும்.
அறிவின் அதிகரிப்பு மற்றும் பரவலுக்கு தொடர, நாம் தோள்களில் நிற்க வேண்டும் என்றால்
ராட்சதர்கள், நாம் இந்த வரைபடங்களை வழங்க வேண்டும் எண்ணங்களின் பரந்த உலகம்.
பொது குறியீடு ஒரு கருவி, ஒரு கருவி காலப்போக்கில் தரம் அதிகரிக்கும் என்று நாங்கள் நம்புகிறோம்
மற்றும் நோக்கத்தில், ஒரு கருவி வழங்கும் என்று நாங்கள் நம்புகிறோம் ஒரு பயனுள்ள பங்களிப்பு
உங்கள் அறிவியல் பயிற்சிக்கு.
இந்த பொது குறியீட்டையும் நீங்கள் வைப்பீர்கள் என்று நம்புகிறோம் ஆச்சரியமான பயன்கள், நாம் குறியீட்டை உருவாக்க முடியும்
சிறந்தது, நீங்கள் மற்ற கருவிகளை உருவாக்க முடியும் அறிஞர்கள் சமூகம் இணைந்து செயல்பட முடியும்
பரந்த ஆழம் சுரங்க ஒரு பொதுவான தேடலில் இந்த கற்றல் கடலின்
நாம் அனைவரும் ஒரு பொதுவான குறிக்கோளைப் பகிர்ந்து கொள்கிறோம் என்று நம்புகிறேன். ஒரு பொதுவான நம்பிக்கை.
விஞ்ஞானிகள், அறிஞர்கள், கலைஞர்கள், எழுத்தாளர்கள், உலக குடிமக்களாக, குழந்தைகள் விரும்பும் வகையில்
கற்றுக்கொள்ள, ஆர்வமுள்ள மனிதர்களாக, நான் நம்புகிறேன் அதிகரிப்பு மற்றும் பரவல் என்று நாம் அனைவரும் நம்புகிறோம்
அறிவு நம் உலகத்தை சிறந்ததாக்கும் இடம், அது எங்களைப் புரிந்துகொள்ள உதவும்
உலகம், நோய் மற்றும் வறுமையை குணப்படுத்த, முன்னேற அறிவியல் மற்றும் வர்த்தகத்தின் முன்னேற்றம் மற்றும்
மனிதநேயம் மற்றும் கலை.
அறிவியல் என்றால் நாம் அனைவரும் பேச வேண்டிய மொழி நாம் நமது உலகை மேம்படுத்த வேண்டும்.
கவனித்தமைக்கு நன்றி.
[முத்திரை குரைக்கிறது]
[இசை]