[Музика]
[Најављивач] Ово је јавни ресурс
[Царл Маламуд] Здраво, ја сам Царл Маламуд.
Добро дошли у Општи индекс.
Представљамо вас бесплатно и неограничено користите скуп н-грама издвојених из 107 милиона,
233 хиљаде, 728 чланака у часописима.
Н-грами се крећу од познатих речи као униграми, до фраза од две речи (биграмс)
фразе до 5 речи, познате као 5 грама.
Све у свему, има 355 милијарди редова н-грама у овом издању општег индекса сваки
што одговара хиту у чланку часописа.
За издвајање је коришћен прибор алата под именом Спаци н-грама, које смо поделили
преко шеснаест датотека.
Са сваким редом је повезан мд5 хасх, који представља чланак у часопису.
Осим тога, наводимо учесталост н-грам у чланку.
Надамо се да ћемо временом навести и фреквенцију у укупном корпусу, метрика релевантности
познат као ТД/ИДФ.
Поред н-грама, Општи индекс садржи кључне речи издвојене помоћу Иаке -а
тоолкит.Иаке „почива на текстуалној статистици карактеристике издвојене из појединачних докумената у
изаберите најважније кључне речи у тексту “.
Табеле кључних речи општег индекса садрже укупно 19 милијарди кључних речи.
На крају, општи индекс садржи метаподатке табела, мапирање мд5 хеша у ставке као што је
јединствена ДОИ адреса за чланак у часопису, наслов, аутор и часопис.
Ово је раније објављивање општег индекса, посао у току.
У неким случајевима издвајање текста није успело.
Понекад метаподаци нису доступни или јесу можда чак и нетачно.
Иако је основни корпус велики, јесте није потпуна и није ажурирана.
Постоји много начина на које се то може побољшати, и радујемо се генералу
Индекс временом постаје све бољи.
Општи индекс заузима приближно 38 терабајта података у облику Постгреса
думп, међутим са компресијом, овај АСЦИИ подаци су смањени на 8,5 терабајта.
Податке можете преузети директно одавде, или користите алате као што је битторрент.
Слободно направите огледала или другу јавност спремишта за прерасподелу општег индекса.
Надамо се да се то може збројити употребе. Користили смо Постгрес базу података,
и коришћењем општег индекса за тражење називи биљака са главне листе.
Индекс се може користити за тражење других предмета, као што су хемикалије, гени у разним
кодирања, протеини, материјали, називи места, или других субјеката.
Уместо Постгрес базе података, друге технике, као што је БЕРТ, може се применити на податке.
Ово је алатка за тражење, речник знања, мапа знања, алат у који верујемо
је суштински објекат за праксу науке у нашем модерном добу.
Овај општи индекс знања не чини темељни корпус доступан, Уместо тога, чињенице
извлаче се из корпуса.
Ово је непотребно и трансформациону употребу.
Ми на ово гледамо као на јавни услужни програм. Ми тврдимо нема власништва над општим индексом.
Посвећена је јавном домену, серија неоптерећених чињеница са којима можете
ради шта хоћеш.
Нема права.
Научници на путу до открића могу се консултовати ову мапу пута за брже проналажење дестинација
они желе да посете. Ми смо само доценти у ходници огромних архива света,
колективна заједница научника и научника и инжењери и уметници који су стварали
ови храмови знања.
Ови храмови, из Александријске библиотеке у Александрину библиотеку, од монаха
Ирске до огромних савремених истраживачких библиотека данашњице, од арапских и јеврејских писара
радећи заједно на изградњи Дома мудрости у Багдаду смештене фабрике знања
у савременим источноиндијским трговачким кућама попут пресе Оксфорда и Кембриџа, ове
су одредишта која научници морају да посете да унапреде свој занат, да уче од њих
они који су дошли пре нас.
Ови храмови садрже збир свих знања, али морамо бити у могућности да пронађемо то знање.
Општи индекс је мапа.
Ово није мапа збира свег људског знања,
али је свакако значајан подскуп.
За повећање и ширење знања да наставимо, ако желимо да стојимо на раменима
дивова, морамо да им доставимо ове карте огроман свет идеја.
Општи индекс је само један алат, алат за које се надамо да ће временом добити на квалитету
а по обиму алат за који се надамо да ће га пружити користан допринос
на вашу научну праксу.
Надамо се да ћете ставити и овај општи индекс изненађујуће употребе, да можемо направити индекс
боље, да можете створити друге алате, то заједница научника може радити заједно
у заједничкој потрази за минирањем огромних дубина овог океана учења.
Верујем да сви делимо заједнички циљ, заједничка нада.
Као научници, научници, уметници, писци, као грађани света, као деца која то желе
верујем да ћу учити као знатижељна људска бића сви се надамо да ће повећање и ширење
знања учиниће наш свет бољим место, то ће нам помоћи да разумемо своје
свету, да излечи болести и сиромаштво, да напредује напредак науке и трговине и
хуманистичких наука и уметности.
Наука је језик којим сви морамо говорити ако морамо побољшати наш свет.
Хвала за слушање.
[Печат лаје]
[Музика]