CURL - получить ХТМЛ код страницы. Обычно роботы так и работают, получают страницу таким образом и сверяются по внутреннему алгоритму. Сам же робот каждый день улучшается, чего только стоит надпись: "Робот уже читает AJAX и FLASH" - уму не постижимо =)
А в целом, врядли на ПХП, тут либо Ruby либо ASP.NET, так как они мощнее, как мне кажется.

спасибо за ответ, то есть полноценный поисковик на пхп написать по вашему не актуально?

Dron19
Актуально. Скорость обработки будет зависить от процессора, на котором размещен поисковик. Гугл поисковик размещен на десятках мощных процессоров, один бы просто не потянул такую ношу. Писать поисковик не актуально, потому что дорого. С другой стороны, говорят, что обычный ПХП медленее того же С в 100 раз, тогда для нормальной обработки и функционирования поисковика ты данные все сохраняешь через ПХП, а обрабатываешь и анализируешь через С.
Ну это так, моё ИМХО, эксперты смогут поправить меня немного =)

ты только мозги запаришь, лучше уже что то новое надумать и сделать... + поисковиков уже много.. врятли будет с него смысл... щас 60% гошей пользуются
30% яшай... и остальные уже всякие фуфики

то есть как это, один сайт, гугл размецен на несколькихсерверах? То есть пол сайта на одном и пол на другом? Но гугл же не тоьлко на пхп написан, что нельзя на пхп разве создать исскуственный интеллект? И последний вопрос, С и С++ разве можно на сайтах использовать? Каким образом, что-то не пойму

Кто то писал тут, что у гугла есть страничка, с которой они пицу заказывают. Вот она на PHP

Какой интеллект... PHP совсем не для этих целей.

На сайтах все что угодно можно использовать, особенно если сервер свой.

twin
Да-да, про пиццу я слышал =)

то есть на пхп не рал написать такой интеллект, или реал, но тупая трата времени и лишняя морока?

Просто пхп знаю нормально, учил долго, терь лень изучать с++ хотя хочется , кто-нибудь подскажет, для каких целей нужно исполььзовать python?

Dron19
ПХП - язык для создания домашних страничек (легкого и среднего уровня). В данный момент идет улучшение самого языка до сложных проектов. Это как ребёнок, ты можешь вложить кучу средств, а окажется лет через 15-20 бездарем, а можешь забросить, а его доведут до идеала.
Если не ошибаюсь, ПХП сделан на C или JAVA, получается это язык от языка, поэтому и медленее.
А вообще, все холиварят, какой язык лучше. Можешь в гугле ввести: php vs python - и получишь плюсы и минусы каждого языка, там целые статьи будут!

спс за помощь

вот еще вопрос, можно сразу начать обучение С++? Без знаний С?

Dron19
Дык они все похожи =) Я знаю лишь ПХП, недавно папе помогал составить запрос в экселе (до этого ни разу не работал).

да я то понимаю, что он похоже, но все равно, я ничего не могу написать на нем, так все же, как лучше, после с изучать с++ или сразу его можно?

учи сразу c++ .... но смотря для чего, если для создание ПС то смысла нету) ты толком ничего не научишься. Либо обратится к профессионалу и хорошо заплатить чтобы она на твоих глазах что то писал и объяснял)

да с++ я учу для себя, интересно, хочется писать проги какие-то, только уже для компа, а не для cgi сервера, может играми займусь)

Не обязательно учить С, для того чтобы начать изучать С++,

А вообще - мой тебе совет - начинай сразу изучать C#, он более объектно ориентирован.

а что на Си шарпе пишется? Чем он лучше С++? Си Шарп же только для виндовс и все! =)

Си # - более высокоуровневый нежели Си/Плюсы, так что если хочешь работать ближе к железу и с большей производительностью, то нужно учить плюсы. Но это только если учишь для себя. На рынке они сейчас особо не востребованны. Могу ещё посоветовать попутно захватить Object C, для написания софта для яблочных платформ.
Си # кстати, не только для винды, есть такой проект, как моно, с его помощью шарп и на линухах и на макосях идёт на ура... Вообще то Мелкомягие работают на кроссплатформеностью, и по-моему уже сейчас в студии можно писать для других ОСей

Таки да, подтверждаю - C# вещь хорошая - под никсами есть проект порта. Плюс ко всему на нём можно ещё и под ASP писать. Короче универсальный язык для всего - я помнится на нём лет 5-6 назад, в бытность прыщавой студентотой, как раз тот же ИИ писал, но в рамках институтской программы. Препод офигевал, гы

А насчёт поисковика - заморачивался не так давно для i2p сети, там поисковика не было, решил сначала написать (и таки снова на том же C#) - загрузку страниц сделал, начал делать индексатор, и вдруг стукнула моча в голову, я решил поискать готовое (хотя по-умному надо было бы сделать наоборот). Вообще, из того что нашёл, более-менее достойные вещи это Sphinx и YaCy. Вот как раз поиск I2P работает на YaCy. Советую присмотреться к готовым решениям (если просто нужно под какой-то проект готовый). А на PHP... я совсем не уверен, что такие вещи пишутся - начиная от главного минуса - однопоточности (хотя есть там какое-то дополнение к PHP, кажется, которое мультипоточность добавляет - но стоит ли овчинка?). Ибо тот же Yacy спокойно может одновременно всасывать по 100 страниц на относительно слабой машинке.