Написать бот

Цитата ("eg_admin"):

"voral" Примерное видение этого вопроса могу отправить в личку. У Вас есть опыт создания подобных элементов?

Ну пока все ваше понятие "подобных элементов" довольно смутно видится. Ну что-то, где то, так или иначе создавал, применял....
Присылайте там посмотрим.

И поймите так или иначе вашу задумку вам придется кому либо предствавить до принятия решения о сотрудничестве.

Информация уже представлена некоторым пользователям, сейчас идут уточнения. В личку отправил примерное видение этого вопроса.

Цитата ("eg_admin"):

Понятно, а вот например такой вопрос. Полностью ли контролируемый процесс? Например если бот будет сборщиком информации, то он "привязан" к месту или все таки в свободном полете?

поясните то вы имели в виду.

Имел ввиду что например "запустить" бот в интернет и он делает свое дело не котролируемый ничем и никем, а может быть установлен какой либо скрип на сайте, который контролирует его действия.

"Neono" не совсем уловил конечно о чем идет речь. О "боте" я сделал только этот топик и несколько интересующихся в личной беседе. За две недели до этого у меня еще НЕ было такой мысли. Так что все совпадения случайны.

Цитата ("eg_admin"):

Имел ввиду что например "запустить" бот в интернет и он делает свое дело не котролируемый ничем и никем, а может быть установлен какой либо скрип на сайте, который контролирует его действия.

Бот всегда работает с ВАШЕГО сервера, просто запросы он шлет разным сайтам.
Контроль над оным конечно нужен и будет -- возможность остановить, сконфигурировать и т.д.

Господи, народ начал писать пауков на PHP?
Хотя я находил где-то статьи в сети, о том как писать демоны на hypertext processor'е. Чаем подавился, когда увидел...

Увы и ах. Все больше заказчиков хотят грабберы/парсеры именно на PHP. Ну как им объяснить, что он не под это заточен?

Цитата ("Demiurh"):

Увы и ах. Все больше заказчиков хотят грабберы/парсеры именно на PHP. Ну как им объяснить, что он не под это заточен?

Мдя... Это всеравно что объяснять человеку, что газонокосилка не предназначена для распиливания соснового леса. Хотя двигатель от газонокосилки для этого использоваться может.
Не знаю, к чему это приведет, но пока все это мне кажется слегка абсурдным.

Да, по поводу PHP-мании это наблюдается. Хотя и PHP почучуть движется вперед, но есть ОДНО БОЛЬШОЕ НО -- нету многопоточности. И меня радуют парсеры-грабберы-пауки "на PHP+CRON" :-D

Цитата ("ossadchy"):

Да, по поводу PHP-мании это наблюдается. Хотя и PHP почучуть движется вперед, но есть ОДНО БОЛЬШОЕ НО -- нету многопоточности. И меня радуют парсеры-грабберы-пауки "на PHP+CRON" :-D

Это не парсеры-грабберы, это позор программистов.
Вообще когда-то у меня был диалог с товарищем, который PHPистов вообще за разработчиков не считает. Ибо очень много среди нас людей, которые пишут не думая, потому как порог вхождения в язык очень низкий, но подводных камней та же много, как и влюбом языке. И, как это ни прискорбно, во многом он был прав. Использование языка генерации разметки не по назначению - один из таких аргументов.
Многопоточность в php есть. Нужно компилить с флагом --enable-threads. Но эта фича уж очень долго в стадии бета-тестирования.

Тема топика в общем то была о другом

Цитата ("eg_admin"):

Тема топика в общем то была о другом

По теме топика:
Нормальный граббер написать тяжело. Нужно знать много мелочей, следить за распределением памяти, учитывать многие ньюансы и помнить о подводных камнях. Не всем это дано в полном объеме.

Мне это точно не дано, пока по крайней мере, поэтому стараюсь узнать мнение знающих людей.

Цитата ("elhsmart"):

Нужно знать много мелочей, следить за распределением памяти, учитывать многие ньюансы и помнить о подводных камнях.

Ну уж распределение памяти эт совсем банально

А вообще, конкретики без четкого ТЗ быть не может, в целом -- задача реализуема.

2 moot & Neono вполне возможно, что вы и правы, но все это приводит по цепочке к следующему:
1. У нас все парсеры-грабберы написаны на PHP. Через одно место. Работают вызовом cron.
2. У нас каждый заказчик уверен, что Hypertext processor предназначен именно для написания парсера-граббера!
3. Нормальные специалисты по web и C/C++ лишаются работы, в то время как в сети плодятся горы говна.
Далее по логической цепочке развития додумайте сами, как и что может произойти.

ИМХО каждый должен заниматься своим делом. Гибкость языка - хорошая штука, но не везде и не всегда.
Плохой хостинг - это уже проблема заказчика. И вам нужно донести то до заказчика, а не ломать копья о cron и еще раз накодить в углу у сервера.
VPS стоит всего на несколько долларов дороже, чем обычный shared хостинг.

Посмотрите, как минимум, на количество оперативы, отжираемой одним PHP-процессом при старте.
Готовы ли вы этим жертвовать ради получения сиюминутной выгоды?

Цитата:

3. Нормальные специалисты по web и C/C++ лишаются работы, в то время как в сети плодятся горы говна.

Не лишается никто работы. Нормальных парсеров/грабберов, для которых одним PHP не обойдешься, хватает. Лично я писал и на PHP и на CPP грабберы. Главное без фанатизма подходить к вопросу.

Цитата ("m00t"):

Не лишается никто работы. Нормальных парсеров/грабберов, для которых одним PHP не обойдешься, хватает. Лично я писал и на PHP и на CPP грабберы. Главное без фанатизма подходить к вопросу.

Возможно я и утрирую, но лучше воспринимать все мое высказывание в общем, как причинно-следственную цепочку, а не в контесте отдельно взятого высказывания.