Sisu
- Definitsioon - mida tähendab Ämblik?
- Sissejuhatus Microsoft Azure'i ja Microsoft Cloud | Kogu selle juhendi kaudu saate teada, mis on pilvandmetöötlus ja kuidas Microsoft Azure aitab teil pilvest rännata ja oma ettevõtet juhtida.
- Techopedia selgitab Ämblik
Definitsioon - mida tähendab Ämblik?
Interneti kontekstis on ämblik spetsiaalne tarkvara, mis on loodud veebis süstemaatiliseks indekseerimiseks ja sirvimiseks tavaliselt veebilehtede indekseerimiseks, et pakkuda neid kasutaja otsingupäringute otsingutulemidena. Kõige kuulsam sellistest ämblikest on Googlebot, Google'i peamine roomik, mis aitab tagada, et otsingupäringutele tagastatakse asjakohased tulemused.
Ämblikud on tuntud ka kui veebiandurid, otsingurobotid või lihtsalt robotid.
Sissejuhatus Microsoft Azure'i ja Microsoft Cloud | Kogu selle juhendi kaudu saate teada, mis on pilvandmetöötlus ja kuidas Microsoft Azure aitab teil pilvest rännata ja oma ettevõtet juhtida.
Techopedia selgitab Ämblik
Ämblik on sisuliselt programm, mida kasutatakse teabe kogumiseks veebist. See indekseerib veebisaitide lehtedelt, ekstraheerides teavet ja indekseerides selle hilisemaks kasutamiseks, tavaliselt otsingumootori tulemuste jaoks. Ämblik külastab veebisaite ja nende lehti erinevate linkide kaudu nii lehtedele kui ka lehtedelt, nii et ilma ühegi lingita lehte on keeruline indekseerida ja see võib olla otsingutulemite lehel väga madala asetusega. Ja kui lehele osutab palju linke, tähendaks see, et see leht on populaarne ja see kuvatakse otsingutulemustes kõrgemal.
Veebis indekseerimisega seotud sammud:
- Ämblik leiab saidi ja hakkab selle lehti roomama.
- Ämblik indekseerib saidi sõnu ja sisu.
- Ämblik külastab saidilt leitud linke.
Ämblikud või veebiröövlid on lihtsalt programmid ja sellisena järgivad nad programmeerijate kehtestatud süstemaatilisi reegleid. Veebisaitide omanikud saavad ka sellesse astuda, öeldes ämblikule, milliseid saidi osi indekseerida ja milliseid mitte. Selleks luuakse fail "robots.txt", mis sisaldab ämbliku jaoks juhiseid selle kohta, milliseid osi indekseerida ja linke järgida ning milliseid peaks ta ignoreerima. Kõige olulisemad ämblikud on need, mis kuuluvad sellistele suurtele otsingumootoritele nagu Google, Bing ja Yahoo, ning need, mis on mõeldud andmete kaevandamiseks ja uurimiseks, kuid on ka mõned pahatahtlikud ämblikud, mis on kirjutatud selleks, et leida ja koguda kasutajale reklaami müümiseks mõeldud s ettevõtetele või veebiturbe haavatavuste leidmiseks.