Поисковые машины или автоматические индексы

Поисковые машины, или автоматические индексы — глобальные или локальные, специализированные (в среде WWW) информационно-поисковые системы, размещаемые на серверах свободного доступа. Состоят из трех компонент: программы сканирования (crawler), индекса и программного обеспечения поиска.

Crawler или spider (паук) – это программа, которая на основе заданных алгоритмов автоматически сканирует различные Web-сайты и обеспечивает полную или частичну индексацию ресурсов, URL, ключевых слов, ссылок и документов. В последующем на основе созданных индексных баз данных поисковые машины предоставляют пользователю доступ к распределенной на узлах Сети информации. Это реализуется через выполнение поисковых запросов в рамках соответсвующего интерфейса.

Программа-сrawler может также переходить по расположенным на сайте ссылкам на другие, близкие по содержанию, страницы. При этом она периодически возвращается к исходным сайтам, чтобы проверить, не произошли ли какие-нибудь изменения и снова считывает страницы. Когда пользователь делает поисковой машине запрос, ее программное обеспечение проходит по созданному индексу в поиске Web-страниц с заданными ключевыми словами и классифицирует эти страницы по степени близости к предмету поиска. Все что находит и считывает робот попадает в индексы ПМ.

Индексы представляют собой гигантское хранилище информации, где хранятся копии текстовой составляющей всех посещенных и проиндексированных Web- страниц.

Для профессиональной работы с автоматическим индексом необходимо учитывать два определяющих аспекта его работы:

• индексирование программой-роботом содержимого Web-страниц. Адрес очередного документа робот узнает либо от автора ресурса, который представил его в систему, либо из гиперссылки, найденной им на уже пройденной странице;

• обработка запросов пользователей по ключевым словам на основе синтаксиса поискового языка системы.

Обе эти фазы работы поисковой машины тесно связаны — чем больше информации о ресурсе извлечено при сканировании, тем потенциально шире возможности поиска. Тот факт, что каждая система в обоих случаях имеет свою специфику, может быть использован для тонкой настройки на решение поисковой задачи.

Поскольку индексы сканируют единое информационное поле — WWW, то в них может находиться информация об одних и тех же ресурсах. Однако время, затраченное на получение результата при поиске, может существенно зависеть от выбранной поисковой машины. Кроме того использование всего одной поисковой системы не дает никаких гарантий по полноте охваченных ресурсов.

Обработчик запросов – программа, которая в соответствии с запросом пользователя перебирает индексы ПМ в поиске информации, интересующей поисковика, и выдает ему в порядке релевантности найденные документы.

Последние исследования возможностей поисковых машин, даже самых мощных из них, таких как AltaVista, или HotBot, показывают, что реальная полнота охвата ресурсов Всемирной Паутины отдельной такой системой не превышает 30%. Поисковая машина получает от пользователя в виде сформулированного запроса одно или несколько ключевых слов вместе с булевыми операторами «И», «ИЛИ», «НЕ», и затем просматривает ранее проиндексированные Web-страницы в поиске этих ключевых слов. Для определения порядка вывода страниц с результатами поиска поисковая машина использует алгоритм классификации сайтов, которые содержат заданныее ключевые слова.

Поисковый механизм может, например, подсчитать, сколько раз ключевое слово встречается на странице. Он также может искать ключевое слово в мета-тэгах (matatag). Мета-тэг – это тэга HTML, который предоставляет информацию о Web-странице. В отличие от большинства HTML-тэгов метатэги никак не влияют на внешний вид документа. Они содержат сведения об информационном наполнении Web-страницы и некоторые его ключевые слова.

Паук (программа) — это… Что такое Паук (программа)?



Паук (программа)

Поиско́вый ро́бот («веб-пау́к», краулер) — программа, являющаяся составной частью поисковой системы и предназначенная для обхода страниц Интернета с целью занесения информации о них в базу данных поисковика. По принципу действия паук напоминает обычный браузер. Он анализирует содержимое страницы, сохраняет его в некотором специальном виде на сервере поисковой машины, которой принадлежит, и отправляется по ссылкам на следующие страницы. Владельцы поисковых машин нередко ограничивают глубину проникновения паука внутрь сайта и максимальный размер сканируемого текста, поэтому чересчур большие сайты могут оказаться не полностью проиндексированными поисковой машиной. Кроме обычных пауков, существуют так называемые «

дятлы» — роботы, которые «простукивают» проиндексированный сайт, чтобы определить, что он доступен.

Порядок обхода страниц, частота визитов, защита от зацикливания, а также критерии выделения значимой информации определяются поисковыми алгоритмами.

В большинстве случаев переход от одной страницы к другой осуществляется по ссылкам, содержащимся на первой и последующих страницах.

Также многие поисковые системы предоставляют пользователю возможность самостоятельно добавить сайт в очередь для индексирования. Обычно это существенно ускоряет индексирование сайта, а в случаях, когда никакие внешние ссылки не ведут на сайт, вообще оказывается единственной возможностью указать на его существование.

Ограничить индексацию сайта можно с помощью файла

См. также

Ссылки

Wikimedia Foundation. 2010.

Смотреть что такое «Паук (программа)» в других словарях:

• Паук в паутине (Вавилон-5)

  — Паук в паутине Сериал Вавилон 5 Номер серии Сезон 2 Серия №  …   Википедия

• Паук (пасьянс) — У этого термина существуют и другие значения, см. Паук (значения). «Паук» в среде Windows 7 …   Википедия

• Паук (значения) — Паук: В Викисловаре есть статья «паук» Пауки (лат. Aranei)  отряд паукообразных членистоногих. Паук, или поисковый робот  программа, скачивающая веб страницы для последующего индексирования. Паук (пасьянс) …   Википедия

• Программа входа в систему — компонент операционной системы Microsoft Windows, отвечающий за вход в систему. Содержание …   Википедия

• Человек-паук (серия игр) — У этого термина существуют и другие значения, см. Человек паук (значения). По мотивам приключений супергероя Marvel Comics Человека паука было разработано множество компьютерных и видеоигр. Содержание 1 До 1990 х 2 1990 е 3 2000 е …   Википедия

• Галилео (программа) — У этого термина существуют и другие значения, см. Галилео. Галилео Жанр научно популярная развлекательная программа Режиссёр(ы) Кирилл Гаврилов, Елена Калиберда Редактор(ы) Дмитрий Самородов Производство Телеформат ( …   Википедия

• Блокнот (программа) — У этого термина существуют и другие значения, см. Блокнот (значения). Блокнот Компонент Microsoft Windows …   Википедия

• Веб-паук — Поисковый робот («веб паук», краулер)  программа, являющаяся составной частью поисковой системы и предназначенная для обхода страниц Интернета с целью занесения информации о них в базу данных поисковика. По принципу действия паук напоминает… …   Википедия

• Список выпусков телепередачи «Большая разница по-украински» — Содержание 1 Канал «ICTV» 2 Канал «1+1» 3 Канал «Интер» В этой стат …   Википедия

• Цикл (программирование) — У этого термина существуют и другие значения, см. цикл. В данной статье или разделе имеется список источников или внешних …   Википедия

Паук (значения) — Википедия

Материал из Википедии — свободной энциклопедии

Перейти к навигации Перейти к поиску

Пау́к:

• Пауки (лат. Aranei) — отряд паукообразных членистоногих.
• Паук, или поисковый робот — программа, скачивающая веб-страницы для последующего индексирования.
• Паук — один из стандартных пасьянсов в WinXP.
• «Паук» — один из важнейших эпизодов Боснийской войны; контрнаступление войска Республики Сербской по отбитию занятых противником территорий.
• «Камера-паук» — подвесная телевизионная камера, способная двигаться во всех плоскостях.

• Паук — река в Краснодарском крае.
• Пауки — село в Николаевском районе Львовской области Украины.

• «Паук» — американский фильм 1945 года.
• «Паук» — мультипликационный фильм студии «Ленфильм» (1994).
• «Паук» — российско-латвийский фильм (1992).
• «Паук» — фильм Дэвида Кроненберга (2002).
• «Паук» — российский детективный телесериал (2015).

• Паук, Дьёрдь (род. 1936) — венгерский скрипач.
• Паук, Марина Яковлевна (1917—1999) — заведующая нефтепромыслом № 1 треста «Малгобекнефть» объединения «Грознефть», Герой Социалистического Труда.

Прозвища

• Паук — прозвище советского серийного убийцы Сергея Щербакова.
• Паук — прозвище российского массового убийцы Николая Мозглякова.
• Паук — прозвище российского рок-музыканта Сергея Троицкого.

Скрытые категории:

Heteropoda maxima — Википедия

Материал из Википедии — свободной энциклопедии

Heteropoda maxima
Самка Heteropoda maxima
промежуточные ранги
Heteropoda maxima Jäger, 2001

Heteropoda maxima (лат.) — вид пауков из семейства Sparassidae, вероятно, самый большой паук в мире. Птицеед-голиаф из Южной Америки уступает ему в размахе конечностей, но заметно превосходит по размерам тела. Heteropoda maxima обитает в лаосской провинции Кхаммуан, где, вероятно, населяет пещеры. Однако, в отличие от других пауков, населяющих пещеры, его глаза не редуцированы.

Самый характерный признак вида — это его необычный размер. Длина тела самок составляет до 46 мм, самцов — примерно 30 мм. Размах конечностей составляет от 25 до 30 см

[1]. Оба пола одного цвета. Основной цвет коричневато-жёлтый. На головогруди имеется несколько нерегулярных тёмных пятен. Брюшко несколько темнее чем головогрудь имеет два небольших тёмных углубления. Хелицеры, лабиум и coxa тёмного красно-коричневого цвета. На педипальпах имеются тёмные пятна. Самцы немного меньше. На педипальпах имеется цимбиум, который как минимум в три раза длиннее, чем толстая пластина tegulum. Щупальца tibia удлинённые. Эпигине самок имеет два характерных, направленных вперёд, лентообразных отростка.

1. ↑ Peter Jäger: A new species of Heteropoda (Araneae, Sparassidae, Heteropodinae) from Laos, the largest huntsman spider? Zoosystema 23, 3, S. 461—465, 2001, S. 461

• Peter Jäger: A new species of Heteropoda (Araneae, Sparassidae, Heteropodinae) from Laos, the largest huntsman spider?. In: Muséum national d’Histoire naturelle, Service des Publications Scientifiques (Hrsg.): Zoosystema. 23, Nr. 3, Paris 2001, ISSN 1280-9551, S. 461—465 (PDF).

Latrodectus hasselti — Википедия

Материал из Википедии — свободной энциклопедии

Текущая версия страницы пока не проверялась опытными участниками и может значительно отличаться от версии, проверенной 24 февраля 2015; проверки требуют 10 правок. Текущая версия страницы пока не проверялась опытными участниками и может значительно отличаться от версии, проверенной 24 февраля 2015; проверки требуют 10 правок.

Latrodectus hasselti
промежуточные ранги Вид: Latrodectus hasselti
Latrodectus hasselti Powell, 1870

Австралийская вдова — вид пауков из семейства пауков-тенётников, родиной которого является Австралия. Относится к роду чёрных вдов, которые встречаются во всех частях света, за исключением Антарктиды. Длина тела самки около 10мм, в то время как самцы имеют значительно меньшие размеры — всего лишь 3-4мм.

Яд его нейротоксичен. Укус паука опасен для человека и вызывает сильные боли. На сегодняшний день существует коммерчески доступное противоядие, но последние исследования показывают, что оно не уменьшает болей. Родственный вид красноспинному пауку чёрная вдова (Latrodectus mactans) родом из жарких районов Северной Америки, более близок Latrodectus katipo из Новой Зеландии.

Этому виду пауков свойственен половой каннибализм^[1].

Циклокосмия — Википедия

Материал из Википедии — свободной энциклопедии

Циклокосмия
промежуточные ранги Род: Циклокосмия
Cyclocosmia Hentz, 1841

Циклокосмия (лат. Cyclocosmia), или «паук люк» — род семейства Ctenizidae. Пауки этого рода имеют резко усечённое брюшко, заканчивающееся хитиновым диском, который усилен системой рёбер и пазов. Во время опасности они выкапывают вертикальные норы глубиной от 7 до 15 см^[1], которые закрывают своим брюшком (так называемое явление фрагмозиса). Для лучшей защиты от хищников вокруг диска расположены шипы. Норки свои предпочитают выкапывать на песчаных склонах. Представители рода циклокосмия сравнительно небольшие, длина тела самца достигает 5 см, а самки — 28 мм^[2]. Питаются в основном насекомыми, но долгое время могут проводить без еды (около полугода). В это время они закапываются в норки и вьют вокруг себя нечто вроде кокона. Отличаются также своей агрессивностью. Обитают в Южных штатах США, Таиланде и Китае. Виды пауков рода циклокосмия могут отличаться друг от друга структурой диска, количеством волосков и формой спермотеки. Пауки рода Cyclocosmia считаются самыми древними арахнидами на Земле. Их предки появились на планете около 100 миллионов лет назад, по крайней мере, самая старая находка палеонтологов датируется этим периодом.

• Cyclocosmia lannaensis Schwendinger, 2005 — Китай, Таиланд
• Cyclocosmia latusicosta Zhu, Zhang & Zhang, 2006 — Китай
• Cyclocosmia loricata (C. L. Koch, 1842) — Мексика, Гватемала
• Cyclocosmia ricketti (Pocock, 1901) — Китай
• Cyclocosmia siamensis Schwendinger, 2005 — Таиланд
• Cyclocosmia torreya Gertsch & Platnick, 1975 — США
• Cyclocosmia truncata (Hentz, 1841) — США

1. ↑ Zhu et al. 2006
2. ↑ Murphy & Murphy 2000

• Murphy, Frances & Murphy, John (2000): An Introduction to the Spiders of South East Asia. Malaysian Nature Society, Kuala Lumpur.
• Zhu, M.S., Zhang, J.X & Zhang, F. (2006): Rare spiders of the genus Cyclocosmia (Arachnida: Araneae: Ctenizidae) from tropical and subtropical China. The Raffles Bulletin of Zoology 54(1): 119—124 PDF (with pictures)
• Platnick, Norman I. (2008): The world spider catalog, version 8.5. American Museum of Natural History.

• Schwendinger, Peter J. (2005): Two new Cyclocosmia (Araneae: Ctenizidae) from Thailand. Revue Suisse de Zoologie 112(1): 225—252

Педипальпы — Википедия

Материал из Википедии — свободной энциклопедии

Педипа́льпы (от лат. pēs «нога» + palpo «гладить, щупать»), или ногощу́пальца^[1] — вторая пара конечностей, расположенных на просоме хелицеровых. Располагаются сбоку от хелицер и предшествуют первой паре ходильных ног. У половозрелых самцов пауков последний членик педипальп превращён в совокупительный аппарат — цимбиум.

Состоят из 6 сегментов: тазового, вертлужного, бедренного, короткого надколенного, берцового и предплюсны. У пауков тазовые сегменты часто расширенно называются максиллами (англ. gnathobases) и функционируют частично как рот, при этом использование этого сегмента в качестве помощи передним ногами может быть, а может и не быть. Сами же конечности могут являться простейшими тактильными органами, внешне напоминающими ноги, как у пауков, или крупным оружием, как хелицеры у скорпионов. На основе сравнительных исследований морфологии педипальп можно предположить, что педипальпы, похожие на ноги, примитивны у паукообразных. В настоящее время разумной альтернативой этой точке зрения есть только предположение, что мечехвосты отражают морфологию примитивных педипальп паукообразных, и из этого сделать вывод, что такие придатки являются примитивными хелицерами. Хелицеры или примитивные хелицеры найдены у нескольких групп паукообразных, таких как рицинулеи, телифоны, скорпионы и ложноскорпионы, но хелицеры в большинстве из этих таксонов не гомологичны тем, что обнаружены у мечехвостов. Педипальпы явно хищные (модифицированы для захвата добычи) у фринов, телифонов, шизомидов и некоторых сенокосцев, принадлежащих к группе Laniatores.

Педипальпы традиционно считаются гомологичными челюстным мандибулам ракообразных и насекомых, хотя более поздние исследования (например гомеозисных генов), предполагают, что педипальпы, вероятно, гомологичны вторым усикам.

Совокупительный аппарат паука Unicorn catleyi

Педипальпы у пауков имеют такую же сегментацию ног, но сегмент tarsus не разделён и pretarsus не имеет боковых когтей. У половозрелых мужских особей пауков конечный сегмент педипальп, tarsus, развивается в сложную структуру совокупительного аппарата, который используется для передачи спермы к женским семенным сосудам при спаривании. Детали этой структуры существенно различаются между различными группами пауков и полезны для идентификации видов.^[2][3]

Педипальпы содержат чувствительные химические детекторы и функционируют как органы вкуса и запаха, дополняя аналогичные имеющиеся на ногах.^[4]

На конце педипальпы пауков расположена структура цимбиум, по форме напоминающая ложку и поддерживающая совокупительный аппарат.^[2] Цимбиум также может использоваться пауками как орган стридуляции при ухаживании.^[5]

Узкое плетевидное или похожее на лист расширение совокупительного аппарата называется embolus.

• Savory, T. 1977. Arachnida. 2nd edition. U.S. Edition published by Academic Press INC. LTD.340 pp.
• Snodgrass, R. E. 1971. A Textbook Arthropod Anatomy. Published by Hafner Publishing Company, INC. 363 pp.
• Torre-Bueno, J. R. 1989. The Torre-Bueno Glossary of Entomology compiled by Stephen W. Nichols; including Supplement A by George S. Tulloch. Published by The New York Entomological Society in cooperation with the American Museum of Natural History. 840 pp.