Kas ir vietņu indeksēšana? Kā tas notiek? Atbildes uz šiem un citiem jautājumiem varat atrast rakstā. Tīmekļa indeksēšana (indeksēšana meklētājprogrammās) ir process, kurā meklētājprogrammas robots datubāzei pievieno informāciju par vietni, ko pēc tam izmanto, lai meklētu informāciju par tīmekļa projektiem, kuriem ir veikta šāda procedūra.
Dati par tīmekļa resursiem visbiežāk sastāv no atslēgvārdiem, rakstiem, saitēm, dokumentiem. Var indeksēt arī audio, attēlus un tā tālāk. Ir zināms, ka atslēgvārdu noteikšanas algoritms ir atkarīgs no meklētājprogrammas.
Ir daži ierobežojumi indeksētās informācijas veidiem (flash faili, javascript).
Iniciācijas pārvaldība
Vietnes indeksēšana ir sarežģīts process. Lai to pārvaldītu (piemēram, lai aizliegtu pievienot konkrētu lapu), ir jāizmanto fails robots.txt un tādi norādījumi kā Allow, Disallow, Crawl-delay, User-agent un citi.
Arī tagi un rekvizīti tiek izmantoti indeksēšanai, slēpjot resursa saturu no Google un Yandex robotiem (Yahoo izmanto tagu).
Meklētājprogrammā Goglle jaunas vietnes tiek indeksētas no dažām dienām līdz vienai nedēļai, bet Yandex - no vienas līdz četrām nedēļām.
Vai vēlaties, lai jūsu vietne tiktu rādīta meklētājprogrammu rezultātu vaicājumos? Pēc tam tas ir jāapstrādā Rambler, Yandex, Google, Yahoo un tā tālāk. Jums ir jāinformē meklētājprogrammas (zirnekļi, sistēmas) par jūsu vietnes esamību, un tad tās to pilnībā vai daļēji pārmeklēs.
Daudzas vietnes nav indeksētas gadiem ilgi. Uz tiem esošo informāciju neredz neviens, izņemot to īpašniekus.
Apstrādes metodes
Vietnes indeksēšanu var veikt vairākos veidos:
- Pirmā iespēja ir manuāla pievienošana. Vietnes dati ir jāievada, izmantojot īpašas meklētājprogrammu piedāvātās veidlapas.
- Otrajā gadījumā meklētājprogrammas robots pats atrod jūsu vietni pēc saitēm un indeksē to. Viņš var atrast jūsu vietni, izmantojot saites no citiem resursiem, kas ved uz jūsu projektu. Šī metode ir visefektīvākā. Ja meklētājprogramma atrod vietni šādā veidā, tā uzskata to par nozīmīgu.
Laiks
Vietnes indeksēšana nav pārāk ātra. Termiņi ir dažādi, no 1 līdz 2 nedēļām. Saites no autoritatīviem resursiem (ar izcilu PR un Titz) ievērojami paātrina vietnes izvietošanu meklētājprogrammu datubāzē. Mūsdienās Google tiek uzskatīts par lēnāko, lai gan līdz 2012. gadam tas šo darbu varētu paveikt nedēļas laikā. UzDiemžēl lietas mainās ļoti ātri. Ir zināms, ka Mail.ru ar vietnēm šajā jomā strādā apmēram sešus mēnešus.
Vietnes indeksēšana meklētājprogrammās nav iespējama katram speciālistam. Jaunu lapu pievienošanas laiku meklētājprogrammu jau apstrādātās vietnes datubāzei ietekmē tās satura atjaunināšanas biežums. Ja resursā pastāvīgi parādās svaiga informācija, sistēma to uzskata par bieži atjauninātu un cilvēkiem noderīgu. Šajā gadījumā viņas darbs tiek paātrināts.
Tīmekļa vietnes indeksēšanas gaitai varat sekot īpašās tīmekļa pārziņiem paredzētajās sadaļās vai meklētājprogrammās.
Izmaiņas
Tātad, mēs jau esam izdomājuši, kā vietne tiek indeksēta. Jāatzīmē, ka meklētājprogrammu datu bāzes tiek bieži atjauninātas. Tādēļ tiem pievienoto jūsu projekta lapu skaits var mainīties (gan samazināties, gan palielināties) šādu iemeslu dēļ:
- meklētājprogrammas sankcijas pret vietni;
- kļūdu esamība vietnē;
- mainu meklētājprogrammu algoritmus;
- pretīgs hostings (nepieejamība serverim, kurā atrodas projekts) un tā tālāk.
Yandex atbildes uz bieži uzdotiem jautājumiem
"Yandex" ir meklētājprogramma, ko izmanto daudzi lietotāji. Tas ieņem piekto vietu starp pasaules meklēšanas sistēmām apstrādāto pētījumu pieprasījumu skaita ziņā. Ja pievienojāt vietni, tās pievienošana datu bāzei var aizņemt pārāk ilgu laiku.
URL pievienošana negarantē tā indeksēšanu. Šī ir tikai viena no metodēm, ar kuras palīdzību sistēmas robots tiek informētspar jaunu resursu. Ja saišu uz vietni no citām vietnēm ir maz vai nav nevienas, tās pievienošana palīdzēs to ātrāk atrast.
Ja indeksēšana nenotika, jums jāpārbauda, vai serverī nav bijušas kļūmes, veidojot lietojumprogrammu no Yandex robota. Ja serveris ziņo par kļūdu, robots pārtrauks savu darbu un mēģinās to pabeigt turp un atpakaļ kārtībā. Yandex darbinieki nevar paātrināt lapu pievienošanu meklētājprogrammas datu bāzei.
Vietnes indeksēšana pakalpojumā Yandex ir diezgan sarežģīts uzdevums. Jūs nezināt, kā meklētājprogrammai pievienot resursu? Ja ir saites uz to no citām vietnēm, tad jums nav jāpievieno īpaša vietne - robots to automātiski atradīs un indeksēs. Ja jums nav šādu saišu, varat izmantot veidlapu "Pievienot URL", lai paziņotu meklētājprogrammai, ka vietne pastāv.
Ņemiet vērā, ka URL pievienošana negarantē, ka jūsu radījums tiks indeksēts (vai indeksēts).
Daudzi cilvēki brīnās, cik ilgs laiks nepieciešams vietnes indeksēšanai pakalpojumā Yandex. Šī uzņēmuma darbinieki garantijas nedod un termiņus neprognozē. Parasti, kopš robots uzzināja par vietni, tā lapas meklēšanā parādās pēc divām dienām, dažreiz pēc pāris nedēļām.
Apstrādāt
"Yandex" ir meklētājprogramma, kurai nepieciešama precizitāte un uzmanība. Vietņu indeksēšana sastāv no trim daļām:
- Meklēšanas robots pārmeklē resursu lapas.
- Satursvietnes (saturs) tiek ierakstīts meklēšanas sistēmas datubāzē (indeksā).
- Pēc 2-4 nedēļām pēc datu bāzes atjaunināšanas varēsiet redzēt rezultātus. Jūsu vietne parādīsies (vai neparādīsies) meklēšanas rezultātos.
Indeksēšanas pārbaude
Kā pārbaudīt vietņu indeksāciju? Ir trīs veidi, kā to izdarīt:
- Ievadiet sava uzņēmuma nosaukumu meklēšanas joslā (piemēram, "Yandex") un pārbaudiet katru saiti pirmajā un otrajā lapā. Ja tur atrodat sava ideja URL, robots savu uzdevumu ir pabeidzis.
- Jūs varat ievadīt savas vietnes URL meklēšanas joslā. Varēsiet redzēt, cik interneta lapu ir parādītas, t.i., indeksētas.
- Reģistrējieties tīmekļa pārziņu lapās Mail.ru, Google, Yandex. Kad būsiet nokārtojis vietnes verifikāciju, varēsiet redzēt indeksēšanas rezultātus un citus meklētājprogrammu pakalpojumus, kas izveidoti, lai uzlabotu jūsu resursa veiktspēju.
Kāpēc Yandex neizdodas?
Vietnes indeksēšana Google tīklā tiek veikta šādi: robots ievada datubāzē visas vietnes lapas, zemas un augstas kvalitātes, neatlasot. Bet reitingā ir iekļauti tikai noderīgi dokumenti. Un "Yandex" nekavējoties izslēdz visu tīmekļa miskasti. Tas var indeksēt jebkuru lapu, taču meklētājprogramma galu galā novērsīs visus atkritumus.
Abām sistēmām ir inkrementāls indekss. Abas zemas kvalitātes lapas ietekmē vietnes rangu kopumā. Šeit darbojas vienkārša filozofija. Konkrētas personas iecienītākie resursilietotājs savā emisijā ieņems augstākas pozīcijas. Taču šim pašam cilvēkam būs grūti atrast vietni, kas viņam pagājušajā reizē nepatika.
Tāpēc, pirmkārt, ir jāpārklāj tīmekļa dokumentu kopijas no indeksēšanas, jāpārbauda, vai nav tukšas lapas, un jānovērš zemas kvalitātes satura indeksēšana.
Paātrināt Yandex
Kā es varu paātrināt vietņu indeksēšanu pakalpojumā Yandex? Veiciet šīs darbības:
- Instalējiet Yandex pārlūkprogrammu savā datorā un izmantojiet to, lai pārlūkotu vietnes lapas.
- Apstipriniet tiesības pārvaldīt resursu Yandex. Webmaster.
- Ievietojiet saiti uz rakstu pakalpojumā Twitter. Ir zināms, ka Yandex ar šo uzņēmumu sadarbojas kopš 2012. gada.
- Pievienojiet vietnes meklēšanu no Yandex. Sadaļā "Indeksēšana" varat ievadīt savus URL.
- Ievadiet "Yandex. Metrica" kodu, neatzīmējot "Lapu iesniegšana indeksēšanai ir aizliegta".
- Izveidojiet vietnes karti, kas pastāv tikai robotam un nav redzama auditorijai. Pārbaude sāksies ar viņu. Vietnes kartes adrese tiek ievadīta failā robots.txt vai atbilstošā formā sadaļā "Tīmekļa pārzinis" - "Indeksēšanas iestatījumi" - "Vietnes kartes faili".
Starpposma darbības
Kas jādara, līdz tīmekļa lapu indeksē Yandex? Vietējai meklētājprogrammai vietne ir jāuzskata par primāro avotu. Tieši tāpēc jau pirms raksta publicēšanas obligāti jāpievieno tā saturs formai "Konkrēti teksti". Citādiplaģiāti pārkopēs ierakstu savā resursā un būs pirmie datubāzē. Rezultātā viņi tiks atzīti par autoriem.
Google datu bāze
Google ir piemēroti tie paši ieteikumi, kurus aprakstījām iepriekš, tikai pakalpojumi būs atšķirīgi:
- Google+ (aizstāj Twitter);
- Google Chrome;
- Google rīki programmētājiem - “Skenēšana” - “Izskatās pēc Googlebot” - opcija “Skenēt” - opcija “Indekss”;
- meklējiet Google resursā;
- Google Analytics (nevis Yandex. Metrics).
Aizliegums
Kas ir vietņu indeksēšanas aizliegums? Varat to pārklāt gan uz visu lapu, gan uz atsevišķu tās daļu (saiti vai teksta daļu). Faktiski pastāv gan globāls indeksēšanas aizliegums, gan vietējais. Kā tas tiek ieviests?
Apsvērsim aizliegumu pievienot vietni meklētājprogrammas datubāzei failā Robots.txt. Izmantojot failu robots.txt, varat izslēgt vienas lapas vai visa resursa virsraksta indeksēšanu, piemēram:
- Lietotāja aģents:
- Disallow: /kolobok.html
- Neatļaut: /foto/
Pirmais punkts norāda, ka instrukcijas ir definētas visiem PS, otrais norāda, ka kolobok.html faila indeksēšana ir aizliegta, bet trešais neļauj pievienot visu foto mapes pildījumu. datu bāze. Ja jums ir jāizslēdz vairākas lapas vai mapes, lūdzu, norādiet tās visas sadaļā Robots.
Lai novērstu konkrētas interneta lapas indeksēšanu, varat izmantot robotu metatagu. Tas atšķiras no faila robots.txttas, ka tas dod norādījumus visiem PS uzreiz. Šis metatags atbilst vispārīgajiem html formāta principiem. Tas jāievieto lapas nosaukumā starp tagiem. Piemēram, ierakstu par aizliegumu var rakstīt šādi:.
Ajax
Kā Yandex indeksē Ajax vietnes? Mūsdienās Ajax tehnoloģiju izmanto daudzi vietņu izstrādātāji. Protams, viņai ir liels potenciāls. Izmantojot to, varat izveidot ātras un produktīvas interaktīvas tīmekļa lapas.
Tomēr meklētājprogrammas robots tīmekļa sarakstu "redz" savādāk nekā lietotājs un pārlūkprogramma. Piemēram, cilvēks skatās ērtu saskarni ar kustīgi ielādētām interneta lapām. Rāpuļprogrammai vienas lapas saturs var būt tukšs vai parādīts kā pārējais statiskais HTML saturs, kura skripti nedarbojas.
Varat izmantot URL ar, lai izveidotu Ajax vietnes, taču meklētājprogramma to neizmanto. Parasti URL daļa pēctiek atdalīta. Tas ir jāņem vērā. Tāpēc vietrāža URL, piemēram, https://site.ru/example, vietā viņš izveido lietojumprogrammu resursa galvenajā lapā, kas atrodas vietnē https://site.ru. Tas nozīmē, ka interneta lapas saturs var nenokļūt datu bāzē. Rezultātā tas netiks parādīts meklēšanas rezultātos.
Lai uzlabotu Ajax vietņu indeksēšanu, Yandex atbalstīja izmaiņas meklēšanas robotā un šādu vietņu URL apstrādes noteikumos. Mūsdienās tīmekļa pārziņi var norādīt Yandex meklētājprogrammai indeksēšanas nepieciešamību, izveidojot atbilstošu shēmu resursu struktūrā. Šim nolūkam jums ir nepieciešams:
- Aizstājiet simbolulapu URLuz !. Tagad robots sapratīs, ka var pieteikties šīs interneta lapas satura HTML versijai.
- Šādas lapas satura HTML versija jāievieto URL, kur ! aizstāts ar ?_escaped_fragment_=.
