Satura rādītājs:
Definīcija - ko nozīmē zirneklis?
Interneta kontekstā zirneklis ir specializēta programmatūra, kas paredzēta sistemātiskai pārmeklēšanai un pārlūkošanai globālajā tīmeklī, parasti Web lapu indeksēšanas nolūkā, lai nodrošinātu tos kā meklēšanas rezultātus lietotāju meklēšanas vaicājumiem. Visslavenākais no šādiem zirnekļiem ir Google galvenais rāpuļprogramma Googlebot, kas palīdz nodrošināt atbilstošu rezultātu atdošanu meklēšanas vaicājumiem.
Zirnekļi ir pazīstami arī kā tīmekļa rāpuļprogrammas, meklēšanas robotprogrammatūras vai vienkārši robotprogrammatūras.
Techopedia skaidro zirneklis
Zirneklis būtībā ir programma, ko izmanto, lai savāktu informāciju no globālā tīmekļa. Tas pārmeklē to vietņu lapas, kurās iegūst informāciju un indeksē to vēlākai lietošanai, parasti meklētājprogrammu rezultātiem. Zirneklis apmeklē vietnes un to lapas, izmantojot dažādas saites uz lapām un no tām, tāpēc lapu, kurā nav vienas saites, uz to būs grūti indeksēt, un meklēšanas rezultātu lapā to var ierindot patiešām zemā vietā. Un, ja ir daudz saišu, kas norāda uz lapu, tas nozīmētu, ka šī lapa ir populāra un meklēšanas rezultātos tā parādās augstāk.
Darbības, kas saistītas ar tīmekļa pārmeklēšanu:
- Zirneklis atrod vietni un sāk pārmeklēt tās lapas.
- Zirneklis indeksē vietnes vārdus un saturu.
- Zirneklis apmeklē saites, kas atrodamas vietnē.
Zirnekļi vai tīmekļa pārlūkprogrammas ir tikai programmas, un kā tādas viņi ievēro sistemātiskus programmētāju noteiktus noteikumus. Tīmekļa vietņu īpašnieki var arī iekļūt, norādot zirneklim, kuras vietnes daļas indeksēt un kuras nedrīkst. Tas tiek darīts, izveidojot failu "robots.txt", kurā ir norādījumi zirneklim par to, kuras porcijas indeksēt un saites, kuras jāievēro, un kuras no tām vajadzētu ignorēt. Visnozīmīgākie zirnekļi tur ir tādi, kas pieder lielām meklētājprogrammām, piemēram, Google, Bing un Yahoo, un tie, kas paredzēti datu ieguvei un izpētei, taču ir arī daži ļaunprātīgi zirnekļi, kas ir rakstīti, lai atrastu un apkopotu e-pastus, kurus lietotājs varētu pārdot uzņēmumiem. vai atrast Web drošības ievainojamības.
