Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Вопрос-Ответ Новый топик    Ответить
 Парсер сайта - вопрос выдержит ли сервер  [new]
Netstud
Member [заблокирован]

Откуда:
Сообщений: 7
Привет друзья.
Появилась вот какая задача (просто интересно)
Дано:
Есть сайт с базой данной, в котором чтоб получить инфу по позициям нужно ввести число от 0000000000 до 9999999999 и каптчу.
Вопрос:
Сколько запросов в секунду выдержит сервер с php и mysql?
Сколько нужно времени чтоб спарсить всю эту базу?
Сколько нужно проксей?
17 авг 11, 20:53    [11135963]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
miksoft
Member

Откуда:
Сообщений: 38544
Если сайт грамотно настроен, то он вас быстренько забанит.
17 авг 11, 20:56    [11135978]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
Netstud
Member [заблокирован]

Откуда:
Сообщений: 7
miksoft
Если сайт грамотно настроен, то он вас быстренько забанит.

Ну будем считать что условия идеальные, админы спят
17 авг 11, 21:02    [11136011]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
miksoft
Member

Откуда:
Сообщений: 38544
Netstud
miksoft
Если сайт грамотно настроен, то он вас быстренько забанит.

Ну будем считать что условия идеальные, админы спят
Если условия идеальные, тогда выдержит. Это вы и сами могли бы догадаться.
А поскольку вопрос задан, значит вы таки сомневаетесь, что условия идеальные.
В любом случае ответить на ваши вопросы, скорее всего, даже сами админы этого сайта не смогут. Это надо брать и пробовать.
17 авг 11, 21:11    [11136056]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
ShSerge
Member

Откуда: ʚонɔ dиw
Сообщений: 24911
Лучше - не надо. Лучше займитесь девушками, чем дурака валять.
17 авг 11, 21:24    [11136114]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
Netstud
Member [заблокирован]

Откуда:
Сообщений: 7
Перебором это до номера 9999999999 чтоб спарсить за 24 часа нужно делать 115741 запрос/сек, а еще каптчу нужно распознавать.
Кто-б подсказал сколько запросов хост сможет в сек обработать пока не загнется?
17 авг 11, 21:36    [11136180]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
Netstud
Member [заблокирован]

Откуда:
Сообщений: 7
ShSerge
Лучше - не надо. Лучше займитесь девушками, чем дурака валять.

ррр, в точку попали, уже не 15 лет - дурака валять :(
17 авг 11, 21:38    [11136189]     Ответить | Цитировать Сообщить модератору
 Re: Парсер сайта - вопрос выдержит ли сервер  [new]
Edd.Dragon
Member

Откуда: Украина
Сообщений: 6963
Netstud
Кто-б подсказал сколько запросов хост сможет в сек обработать пока не загнется?

Сферический хост в вакууме? Миллиарды запросов в секунду.
17 авг 11, 22:49    [11136415]     Ответить | Цитировать Сообщить модератору
Все форумы / Вопрос-Ответ Ответить