[Музыка]
[Анонсер] Бу җәмәгать ресурсы
[Карл Маламуд] Сәлам, мин Карл Маламуд.
Гомуми индекска рәхим итегез.
Без монда сезнең бушлай һәм чиксез тәкъдим итәбез 107 миллионнан алынган n-грамм җыелмасын кулланыгыз,
233 мең, 728 журнал мәкаләсе.
N-грамм бер сүздән тора, билгеле униграмма буларак, ике сүзле фразаларга (биграммалар)
5 граммга кадәр булган 5 сүзле гыйбарәләр.
Барысы да әйтелгәнчә, 355 миллиард рәт n-грамм бар гомуми индексның бу чыгарылышында
журнал мәкаләсендә хитка туры килә.
Чыгару өчен Spacy дип аталган кораллар җыелмасы кулланылды без бүлгән n-грамм
уналты файл аша.
Rowәр рәт белән бәйләнгән md5 гаш, ул журнал мәкаләсен күрсәтә.
Моннан тыш, без ешлыкны күрсәтәбез мәкаләдә n-грамм.
Вакыт узу белән ешлыкны да санарбыз дип ышанабыз гомуми корпуста, актуальлек метрикасы
TD / IDF буларак билгеле.
N-граммаларга өстәп, Гомуми индекс Yake ярдәмендә алынган ачкыч сүзләр бар
toolkit.Yake “текст статистикасына таяна бер документлардан алынган үзенчәлекләр
текстның иң мөһим сүзләрен сайлагыз. "
Гомуми индекс ачкыч сүз таблицалары бар барлыгы 19 миллиард ачкыч сүз.
Ниһаять, гомуми индекста мета-мәгълүматлар бар таблица, md5 хэшын шундый әйберләргә харитацияләү
журнал мәкаләсе өчен DOI уникаль адресы, исем, автор һәм журнал.
Бу гомуми индексның иртә чыгарылышы, эш дәвам итә.
Кайбер очракларда текстны чыгару уңышсыз булды.
Кайвакыт, мета-мәгълүматлар мөмкин түгел, яисә бәлки хәтта дөрес булмагандыр.
Төп корпус зур булса да, ул тулы түгел, һәм заманча түгел.
Моны яхшырту өчен бик күп юллар бар, һәм без генералны түземсезлек белән көтәбез
Вакыт узу белән индекс яхшырак.
Гомуми индекс якынча 38не били Постгрес формасында терабайт мәгълүматлар
ташлау, ләкин кысу белән, бу ASCII мәгълүматлар 8,5 терабайтка кадәр киметелә.
Сез мәгълүматны турыдан-туры моннан күчереп ала аласыз, яисә битторент кебек коралларны кулланыгыз.
Көзге яки бүтән җәмәгать булдыру өчен үзегезне иркен хис итегез гомуми индексны бүлеп бирү өчен саклагычлар.
Безнең сан - аны санга куярга мөмкин куллану. Без Postgres мәгълүмат базасын кулланабыз,
эзләү өчен гомуми индекс куллану мастер исемлектән үсемлекләр исемнәре.
Индекс бүтәннәрне эзләү өчен кулланылырга мөмкин химикатлар, төрле геннар кебек әйберләр
кодлау, протеиннар, материаллар, урын исемнәре, яки бүтән оешмалар.
Postgres мәгълүмат базасы урынына, башка техника, BERT кебек мәгълүматларга кулланылырга мөмкин.
Бу эзләү коралы, белем сүзлеге, белемгә карта, без ышанган корал
практика өчен кирәкле корылма безнең заманда фән.
Белемгә бу гомуми индекс ясамый төп корпус бар, Киресенчә, фактлар
корпустан алынган.
Бу уйланмаган һәм үзгәртеп кору.
Без моны җәмәгать ярдәме дип саныйбыз гомуми индекска хуҗалык юк.
Ул җәмәгать доменына, сериягә багышланган сез эшли алырлык сансыз фактлар
теләгәнне эшлә.
Хокук юк.
Табыш юлындагы галимнәр консультация бирә ала юнәлешләрне тизрәк табу өчен бу юл картасы
Алар килергә телиләр. Без бары тик докторлар дөньяның зур архив коридорлары,
галимнәрнең һәм галимнәрнең коллективы һәм булдырган инженерлар һәм рәссамнар
бу гыйбадәтханәләр.
Бу гыйбадәтханәләр, Александрия китапханәсеннән Александра китапханәсенә, монахлардан
Ирландиянең заманча тикшеренү китапханәләренә бүгенге гарәп һәм яһүд язучыларыннан
Хикмәт йорты төзү өчен бергә эшләү Багдатта урнашкан белем фабрикаларына
хәзерге Көнчыгыш Indianиндстан сәүдә йортларында Оксфорд һәм Кембридж пресслары, болар
галимнәр барырга тиеш юнәлешләр һөнәрләрен алга җибәрү, өйрәнү
бездән алда килгәннәр.
Бу гыйбадәтханәләрдә барлык белемнәр бар, ләкин без бу белемне таба белергә тиеш.
Гомуми индекс - карта.
Бу бөтен кеше белемнәренең картасы түгел,
ләкин ул, әлбәттә, зур өлеш.
Белемне арттыру һәм тарату өчен дәвам итәргә, җилкәдә торырга тиеш булсак
гигантлар, без аңа бу карталарны бирергә тиеш киң идеялар дөньясы.
Гомуми индекс - бер корал, корал вакыт узу белән сыйфатка ирешер дип ышанабыз
һәм күләмендә, без бирербез дип өметләнгән корал файдалы өлеш
сезнең фән практикасына.
Бу гомуми индексны да куярсыз дип ышанабыз индекс ясый алуыбыз өчен гаҗәп куллану
яхшырак, сез башка кораллар булдыра аласыз галимнәр җәмгыяте бергә эшли ала
киң тирәнлектә мина эзләүдә Бу уку океаны.
Минем уйлавымча, без барыбыз да уртак максат, уртак өмет.
Галимнәр, галимнәр, рәссамнар, язучылар, дөнья гражданнары, теләгән балалар кебек
өйрәнергә, кызык кешеләр буларак, мин ышанам арту һәм таралу дип барыбыз да өметләнәбез
белем дөньябызны яхшыртачак урыны, бу безне аңларга ярдәм итәчәк
дөнья, авыруларны һәм ярлылыкны дәвалау, алга бару фән һәм сәүдә үсеше һәм
гуманитар һәм сәнгать.
Фән - без барыбыз да сөйләшергә тиеш тел без дөньябызны яхшыртырга тиеш.
Тыңлаганыгыз өчен рәхмәт.
[Мөһер өрә]
[Музыка]