[సంగీతం]
[ప్రకటనకర్త] ఇది ప్రజా వనరు
[కార్ల్ మాలాముడ్] హలో, నేను కార్ల్ మాలాముడ్.
సాధారణ సూచికకు స్వాగతం.
మీ ఉచిత మరియు అపరిమిత కోసం మేము ఇక్కడ అందిస్తున్నాము 107 మిలియన్ నుండి సేకరించిన n- గ్రాముల సమితిని ఉపయోగించండి,
233 వేలు, 728 జర్నల్ కథనాలు.
N- గ్రాములు ఒకే పదాల నుండి ఉంటాయి, తెలిసినవి యూనిగ్రామ్‌లుగా, రెండు పదాల పదబంధాలకు (బిగ్‌రామ్స్)
5-గ్రామ్స్ అని పిలువబడే 5-పదాల పదబంధాలు.
355 బిలియన్ వరుసల n- గ్రాముల వరుసలు ఉన్నాయి సాధారణ సూచిక యొక్క ఈ విడుదలలో, ప్రతి
జర్నల్ కథనంలో విజయానికి సంబంధించినది.
సేకరించేందుకు Spacy అనే టూల్‌కిట్ ఉపయోగించబడింది మేము విభజించిన n- గ్రాములు
పదహారు ఫైల్స్ అంతటా.
ప్రతి అడ్డు వరుసతో అనుబంధించబడినది md5 హాష్, ఇది ఒక జర్నల్ కథనాన్ని సూచిస్తుంది.
అదనంగా, మేము ఫ్రీక్వెన్సీని జాబితా చేస్తాము వ్యాసంలో n- గ్రామ్.
కాలక్రమేణా ఫ్రీక్వెన్సీని కూడా జాబితా చేయాలని మేము ఆశిస్తున్నాము మొత్తం కార్పస్‌లో, metచిత్యం మెట్రిక్
TD/IDF అని పిలుస్తారు.
N- గ్రాములతో పాటు, సాధారణ సూచిక Yake ఉపయోగించి సేకరించిన కీలకపదాలను కలిగి ఉంది
టూల్‌కిట్.కే "టెక్స్ట్ స్టాటిస్టికల్‌పై ఆధారపడి ఉంటుంది సింగిల్ డాక్యుమెంట్‌ల నుండి సేకరించిన ఫీచర్‌లు
టెక్స్ట్ యొక్క అత్యంత ముఖ్యమైన కీలకపదాలను ఎంచుకోండి. "
సాధారణ సూచిక కీవర్డ్ పట్టికలు కలిగి ఉంటాయి మొత్తం 19 బిలియన్ కీలకపదాలు.
చివరగా, సాధారణ సూచికలో మెటాడేటా ఉంటుంది పట్టిక, md5 హాష్ వంటి అంశాలకు మ్యాపింగ్
జర్నల్ కథనం కోసం DOI ప్రత్యేక చిరునామా, శీర్షిక, రచయిత మరియు పత్రిక.
ఇది సాధారణ సూచిక యొక్క ముందస్తు విడుదల, ఒక పని జరుగుతోంది.
కొన్ని సందర్భాల్లో, టెక్స్ట్ వెలికితీత విఫలమైంది.
కొన్నిసార్లు, మెటాడేటా అందుబాటులో లేదు, లేదా బహుశా కూడా తప్పు.
అంతర్లీన కార్పస్ పెద్దది అయితే, అది పూర్తి కాలేదు, మరియు తాజాగా లేదు.
దీన్ని మెరుగుపరచడానికి అనేక మార్గాలు ఉన్నాయి, మరియు మేము జనరల్ చేయడానికి ఎదురుచూస్తున్నాము
కాలక్రమేణా మెరుగైన సూచిక.
సాధారణ సూచిక సుమారు 38 ఆక్రమించింది పోస్ట్‌గ్రెస్ రూపంలో టెరాబైట్ల డేటా
డంప్, అయితే కుదింపుతో, ఈ ASCII డేటా 8.5 టెరాబైట్‌లకు తగ్గించబడింది.
మీరు ఇక్కడ నుండి నేరుగా డేటాను డౌన్‌లోడ్ చేసుకోవచ్చు, లేదా bittorrent వంటి సాధనాలను ఉపయోగించండి.
అద్దాలు లేదా ఇతర పబ్లిక్ సృష్టించడానికి సంకోచించకండి సాధారణ సూచికను పునistపంపిణీ చేయడానికి రిపోజిటరీలు.
మా సంఖ్య అది ఒక సంఖ్యకు పెట్టవచ్చు ఉపయోగాలు. మేము పోస్ట్‌గ్రెస్ డేటాబేస్ ఉపయోగిస్తున్నాము,
మరియు శోధించడానికి సాధారణ సూచికను ఉపయోగించడం మాస్టర్ జాబితా నుండి మొక్కల పేర్లు.
ఇండెక్స్ ఇతర కోసం శోధించడానికి ఉపయోగించవచ్చు రసాయనాలు వంటి వస్తువులు, వివిధ జన్యువులు
ఎన్‌కోడింగ్‌లు, ప్రోటీన్లు, మెటీరియల్స్, స్థల పేర్లు, లేదా ఇతర సంస్థలు.
పోస్ట్‌గ్రెస్ డేటాబేస్‌కు బదులుగా, ఇతర పద్ధతులు, BERT వంటివి డేటాకు వర్తించవచ్చు.
ఇది ఒక శోధన సాధనం, విజ్ఞాన నిఘంటువు, జ్ఞానానికి మ్యాప్, మనం నమ్మే సాధనం
అభ్యాసానికి అవసరమైన సౌకర్యం మన ఆధునిక యుగంలో సైన్స్.
జ్ఞానానికి ఈ సాధారణ సూచిక చేయదు అంతర్లీన కార్పస్ అందుబాటులో ఉంది, బదులుగా, వాస్తవాలు
కార్పస్ నుండి సేకరించబడతాయి.
ఇది నిరభ్యంతరమైనది మరియు పరివర్తన ఉపయోగం.
మేము దీనిని పబ్లిక్ యుటిలిటీగా చూస్తాము. మేము నొక్కిచెప్పాము సాధారణ సూచికపై యాజమాన్యం లేదు.
ఇది పబ్లిక్ డొమైన్, సిరీస్‌కి అంకితం చేయబడింది మీరు చేయగల అసంఖ్యాకమైన వాస్తవాలు
నీ ఇష్టం వచ్చినట్లు చెయ్యి.
ఎలాంటి హక్కులు రిజర్వ్ చేయబడలేదు.
ఆవిష్కరణ మార్గంలో పండితులు సంప్రదించవచ్చు గమ్యస్థానాలను మరింత త్వరగా కనుగొనడానికి ఈ రోడ్‌మ్యాప్
వారు సందర్శించాలనుకుంటున్నారు ప్రపంచంలోని విశాలమైన ఆర్కైవ్‌ల హాలులు,
పండితులు మరియు శాస్త్రవేత్తల సమిష్టి సంఘం మరియు సృష్టించిన ఇంజనీర్లు మరియు కళాకారులు
ఈ విజ్ఞాన దేవాలయాలు.
ఈ ఆలయాలు, అలెగ్జాండ్రియా లైబ్రరీ నుండి సన్యాసుల నుండి అలెగ్జాండ్రా లైబ్రరీకి
విస్తారమైన ఆధునిక పరిశోధన గ్రంథాలయాలకు ఐర్లాండ్ నేటి, అరబ్ మరియు యూదు లేఖకుల నుండి
వివేకం యొక్క ఇంటిని నిర్మించడానికి కలిసి పని చేయడం బాగ్దాద్‌లో జ్ఞాన కర్మాగారాలు ఉన్నాయి
వంటి ఆధునిక ఈస్ట్ ఇండియన్ ట్రేడింగ్ హౌస్‌లలో ఆక్స్‌ఫర్డ్ మరియు కేంబ్రిడ్జ్ ప్రెస్‌లు, ఇవి
పండితులు తప్పక సందర్శించాల్సిన గమ్యస్థానాలు వారి నైపుణ్యాన్ని ముందుకు తీసుకెళ్లడానికి, నేర్చుకోవడానికి
మా ముందు వచ్చినవి.
ఈ దేవాలయాలు మొత్తం జ్ఞానం మొత్తాన్ని కలిగి ఉంటాయి, కానీ మనం ఆ జ్ఞానాన్ని కనుగొనగలగాలి.
సాధారణ సూచిక ఒక మ్యాప్.
ఇది మొత్తం మానవ జ్ఞానం మొత్తానికి మ్యాప్ కాదు,
కానీ ఇది ఖచ్చితంగా గణనీయమైన ఉపసమితి.
జ్ఞానం యొక్క పెరుగుదల మరియు వ్యాప్తి కోసం కొనసాగించడానికి, మనం భుజాలపై నిలబడాలంటే
జెయింట్స్, మేము ఈ మ్యాప్‌లను తప్పక అందించాలి ఆలోచనల విస్తృత ప్రపంచం.
సాధారణ సూచిక ఒక సాధనం, ఒక సాధనం కాలక్రమేణా నాణ్యత పెరుగుతుందని మేము ఆశిస్తున్నాము
మరియు స్కోప్‌లో, అందించగలదని మేము ఆశిస్తున్నాము ఉపయోగకరమైన సహకారం
మీ సైన్స్ అభ్యాసానికి.
మీరు ఈ సాధారణ సూచికను కూడా పెడతారని మేము ఆశిస్తున్నాము ఆశ్చర్యకరమైన ఉపయోగాలు, మేము సూచికను తయారు చేయవచ్చు
మంచిది, మీరు ఇతర సాధనాలను సృష్టించవచ్చు పండితుల సంఘం కలిసి పనిచేయగలదు
విస్తారమైన లోతులను గని చేయడానికి ఒక సాధారణ అన్వేషణలో ఈ విద్యా సముద్రం.
మనమందరం ఒక ఉమ్మడి లక్ష్యాన్ని పంచుకుంటామని నేను నమ్ముతున్నాను, ఒక సాధారణ ఆశ.
శాస్త్రవేత్తలుగా, పండితులుగా, కళాకారులుగా, రచయితలుగా, ప్రపంచ పౌరులుగా, పిల్లలు కోరుకుంటున్నట్లుగా
తెలుసుకోవడానికి, ఆసక్తికరమైన మనుషులుగా, నేను నమ్ముతున్నాను పెరుగుదల మరియు విస్తరణ అని మనమందరం ఆశిస్తున్నాము
జ్ఞానం మన ప్రపంచాన్ని మెరుగుపరుస్తుంది స్థలం, అది మనని అర్థం చేసుకోవడానికి మాకు సహాయపడుతుంది
ప్రపంచం, వ్యాధి మరియు పేదరికాన్ని నయం చేయడానికి, ముందుకు సాగడానికి సైన్స్ మరియు కామర్స్ పురోగతి మరియు
మానవీయ శాస్త్రాలు మరియు కళలు.
సైన్స్ అనేది మనమందరం తప్పక మాట్లాడాల్సిన భాష మన ప్రపంచాన్ని మనం మెరుగుపరుచుకోవాలి.
వింటున్నందుకు కృతఙ్ఞతలు.
[ముద్ర మొరుగుతోంది]
[సంగీతం]