Список имён поисковых ботов

[Medghik]

Вот нашел в нете списочек, надеюсь будет полезен :)
поисковый робот -> поисковая система.

Сам список:

Acoon Acoon bot
AnzwersCrawl Australian search
Arachnoidea EuroSeek search
Araneo Apparently spiders
ArchitextSpider Excite spider
Atomz Atomz bot
CMC Computer Music Center bot
ComputingSite ComputingSite bot
Cruizer Southafrican spider
Datenbank Datenbank.de bot
DeepIndex DeepIndex spider
Die Blinde Kuh German Kids spider
DomainsDB.net MetaCrawler v.0.9.7b http://domainsdb.net/
Esther Build database bot
ExplorerSearch New Zealand Explorer
Fast-WebCrawler AllTheWeb spider
Fido PlanetSearch spider
FreeCrawl EuroSeek spider
Gaisbot GAIS spider
Gigabot Gigablast
Googlebot/2.1 (+http://www.google.com/bot.html) Google
Gulliver Northern Light spider
Gulper Web Bot Yuntis web robot
Icorus Webmasterworld.com Bot
InfoSeek InfoSeek spider
Iron33 Verno spider
IsraeliSearch=Israeli Society
JCrawler Vietnamese search
KIT Fireball Fireball search
KO Yappo Yappo search
Mercator Altavista spider
Mewsoft Search Engine Newsoft spider
Motor CyberCon Search spider
Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp) Yahoo!
MuscatFerret EuroFerret database
MwdSearch Finnish search
NEC MeshExplorer NETPLAZA search
Nederland Zoek Nederland.net search
NetScoop NetScoop search
Nutch open-source web search
Onet.pl SA http://szukaj.onet.pl
Openbot Openfind search
Openfind data gatherer Openfind bot
Orb Search Orb search
RHCS RoadHouse search
Scooter Altavista spider
Scrubby Scrub The Web search
SearchTone Developer's site spider
Sidewinder InfoSeek spider
Slurp Inktomi/Hot Bot search
StackRambler/2.0 (MSIE incompatible) Rambler.ru bot
SurveyBot/2.3 (Whois Source) http://www.whois.sc/
SwissSearch Swiss search
Tarantula Altavista spider
Trek17 Altavista search
UdiSearch Yahoo spider
UltraSeek InfoSeek spider
VWbot SearchBC database spider
Vagabondo Mainly Dutch spider
Valkyrie Japanese ODIN search
Voyager Lisa search service
WebCrawler Fast
WebCrawler WebCrawler search
WebQuest Build search
Wired Digital Wired Digital spider
YahooSeeker Yahoo spider
Yandex/1.01.001 (compatible; Win16; H) «зеркальщик» Яндекса, т.е. робот, определяющий зеркала сайтов.
Yandex/1.01.001 (compatible; Win16; I) индексирующий робот Яндекса.
Yandex/1.01.001 (compatible; Win16; P) индексатор картинок Яндекса.
Yandex/1.03.000 (compatible; Win16; M) подсветчик, робот, обращающийся к странице по ссылке «Найденные слова» и «подсвечивающий» слова запроса в ее тексте.
Yandex/1.03.003 (compatible; Win16; D) робот, обращающийся к странице при добавлении ее через форму «Добавить URL».
Zealbot LookSmart spider
ZyBorg Wisenut search
aWapClient WAP content crawler
ah-ha.com ah-ha bot
aport Aport.ru bot
appie Walhello.com search
ask jeeves Ask Jeeves
bumblebee= Relevare.com bot
crawler3 Altavista spider
ia_archiver Archive.org Bot
lycos Lycos.com Bot
msnbot/1.0 (+http://search.msn.com/msnbot.htm) MSN Search
scooter Altavista
semanticdiscovery Semanticdiscovery.com spider
slurp@inktomi inktomi
szukacz Polish searches
w3index Scandinavian web spider
whatuseek What You Seek

[Ignat]

Забыли про Вебальту:
webalta

[RonVisal]

О, спасибо...пригодится.

[r2v4n]

вот полный списко ботов :
http://www.robotstxt.org/wc/active/html/type.html
правда только там нет русскоязычных

[Seolab]

вот полный списко ботов :
http://www.robotstxt.org/wc/active/html/type.html
правда только там нет русскоязычных

Так, а нужных нам русскоязычных не так уж и много :)

А в вашей базе нет бота YahooSeeker

[RonVisal]

Да, русских маловато будет :-/

[r2v4n]

на самом деле, никогд ане будет полной базы ботов... вот у меня есть пару ботов, которые лазят по сайтам и делают нужные мне вещи (НЕ СПАМ ;) ) и естесно о них никто не узнает... боты создаются каждый день... многие в своей жизни мечтали написать свой поисковик.. я когда то тоже писал кога в универе учился... кстати писал на диплом:) .. это я немного отвлекся от темы.. насчет этого предлагаю просто сделать отдельную тему по ботам.. и добавлять их.. на обзее обозрение... только без лишних каментов и т.д.. добавил бота- краткое описание... и все .. как вам? ;)

[Seolab]

r2v4n, а ты на чем поиск писал? И далеко продвинулся?

Тему, конечно, можно про ботов создать, только мало народу поддержит ))

[r2v4n]

поиск писал на с++ и ПХП.. тегость индексатор был на с++ который заносил в MySQL базу .. там происходило ранжирование... а выдача на пхп... давно это было... хотя пару вещей были достойные.. .. но они актуальны для 98-99 года.. :)... не может 1 человек сделать поисковик.. так то оставте мечты ! :( хотя, все гениальные вещи начинают рождаться от одного человека.. а потом их поддерживают ;)..
для своего поисковика нужно писать свою базу а не использовать MYSQl или POSTRGRESS это все не то.. потом методы ранжирования и т.д..

[Seolab]

не может 1 человек сделать поисковик..
А как же Брин и его напарник? забыл имя ))

Да, согласен, что нужна группа спецов. По-моему это нереально сложно,
потому что единовременно надо вбухать громадную сумму на создание и рекламу.. Попробуй раскрутиться, когда кругом такие гиганты как яндекс и компания..
Пока остается только за успехами или неудачами вебальты наблюдать..

[r2v4n]

Серней брин и Лари Педж. скажу честно,... без понтов.. что они придумали- ссылочное ранджирование.. это было у меня реальзованно тоже.. тока они запустили в 97 году.. а я сдела это в 2002 году... так что не успел :( да и то я сделал потому что знал про гугл и ссылочное ранжирование ;)
да и сделали они ничего большого.. да и получили потом спонсорство и насобирали сами денег и открыли фирму.. .. они сделали лишь маленькую основу.. а потмо ан них уже стали работать десятки людей

[RonVisal]

а я уже думал час поисковик забабахаю :)

"ни у кого скрипта яндекса нет?" - видел на каком то форуме...

[Ignat]

Скрипт можно и самому написать... а вот dll'ку с алгоритмом... =)

[r2v4n]

причем тут dll'ка? ;)

[RonVisal]

Кто за 1$ напишет? "dll'ку с алгоритмом"?

[r2v4n]

смотря с каким алгоритмом? ;)

[RonVisal]

С алгоритмом "Яндекса" :)))
Шутка...

Вообще, сколько затрат уходит на создание?

[Beloussov]

RonVisal,
не думаю что очень много.

[r2v4n]

на создание чего? алгоритмов валом.. главное граммотная реализация их

[RonVisal]

Помойму подойдёт...

НУ, думаю что очень много.

[Ignat]

Кто за 1$ напишет? "dll'ку с алгоритмом"?


select * from site_index where
"title" & "desc" = "%like%" or
"title" and "desc" = "%like%" or
"title" or "desc" = "%like%"
Then
response.write("<a href="" & url & "">" & title & "</a>")

else

Ничего не найдено, спроси у Яндекса.

Давай 1 у.е :D

[Ignat]

причем тут dll'ка? ;)
Ну я не знаю с помощью какой программы яндекс проводит анализ страницы ( точнее с помощью какого компонента ), понятно что не с помощью ДЛЛ, у них там своя фишка...

[r2v4n]

коечто что из поисковых алгоритмов я реализовывал неоднократно.. коечто тяжело.... надо рессурсы и время