Правила     Закладки     Карма    Календарь    Журналы    Помощь    Поиск    PDA    Чат   
        СМС-ки
   
Пейджер выключен!
 
Фильтр авторов:    показать 
  скрыть
  Ответ в темуСоздание новой темыСоздание опроса

> Падает apache из-за curla на Denwere
session_on  
 ۩  Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Пользователь
**

Профиль
Группа: Пользователь
Сообщений: 68
Пользователь №: 39921
На форуме: 2 года, 5 месяцев, 6 дней
Карма: 1




Привет, искал решение проблемы в инете, не нашел. Может быть вы сталкивались с подобной проблемой и подскажите мне ее решение.
Существует множество скриптов - написаны они по разному под разные сайты для парсинга (В том что они прописаны верно я уверен на 100% так как сам их писал).
Не важно какие я скрипты запущу - все равно временами падает apache.
Апач может не падать и 10 минут и 30 минут и даже 2 часа, все зависит с каким потоком я запущу скрипты.
Если запустить допустим в 150 потоков, то через минут 10 апач упадет... если 30 потоков то может продержаться на плаву часа 4.
Но я хочу решить эту проблему - чтоб он не падал и я запускал скрипты в потов 150...
Системник у меня отличный - ресурсов хватает, установлена Windows 7 x64
user posted image
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
Invis1ble  
Дата
Цитировать сообщение

Пользователя сейчас нет на форуме




******

Профиль
Группа: Эксперт
Группа переписки
Сообщений: 11782
Пользователь №: 23195
На форуме: 6 лет, 4 месяца, 9 дней
Карма: 428

Трезвый :
7 лет, 3 месяца, 9 дней


php 5.3 apache 2.2
это всё устаревшие версии


--------------------
PMПисьмо на e-mail пользователюСайт пользователя
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
killer8080  
Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Здесь живет
******

Профиль
Группа: Эксперт
Группа переписки
Сообщений: 8733
Пользователь №: 26630
На форуме: 5 лет, 9 месяцев
Карма: 591




парсеры нужно запускать в CLI а не в апаче wink.gif
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
session_on  
 ۩  Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Пользователь
**

Профиль
Группа: Пользователь
Сообщений: 68
Пользователь №: 39921
На форуме: 2 года, 5 месяцев, 6 дней
Карма: 1




Цитата (Invis1ble @ 13.03.2016 - 17:39)
php 5.3 apache 2.2
это всё устаревшие версии

У меня вроде бы последняя версия Denwera
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
session_on  
 ۩  Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Пользователь
**

Профиль
Группа: Пользователь
Сообщений: 68
Пользователь №: 39921
На форуме: 2 года, 5 месяцев, 6 дней
Карма: 1




Цитата (killer8080 @ 13.03.2016 - 19:26)
парсеры нужно запускать в CLI а не в апаче wink.gif

Это не совсем парсер smile.gif
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
kaww  
Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Здесь живет
******

Профиль
Группа: Форумчанин
Завсегдатай форума
Сообщений: 1755
Пользователь №: 20757
На форуме: 6 лет, 10 месяцев
Карма: 184




Цитата (session_on @ 14.03.2016 - 01:36)
У меня вроде бы последняя версия Denwera

http://php.net/downloads.php
https://httpd.apache.org/
По теме: http://stackoverflow.com/questions/8798286...ermittent-error
Возможно просто стоит обновиться. Или твой случай - это второй ответ.
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
session_on  
 ۩  Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Пользователь
**

Профиль
Группа: Пользователь
Сообщений: 68
Пользователь №: 39921
На форуме: 2 года, 5 месяцев, 6 дней
Карма: 1




Цитата (kaww @ 14.03.2016 - 05:46)
Цитата (session_on @ 14.03.2016 - 01:36)
У меня вроде бы последняя версия Denwera

http://php.net/downloads.php
https://httpd.apache.org/
По теме: http://stackoverflow.com/questions/8798286...ermittent-error
Возможно просто стоит обновиться. Или твой случай - это второй ответ.

Спасибо, попробую из более новой версии php - dll curla взять и поставить на denwer, может быть поможет
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
killer8080  
Дата
Цитировать сообщение

Пользователя сейчас нет на форуме



Здесь живет
******

Профиль
Группа: Эксперт
Группа переписки
Сообщений: 8733
Пользователь №: 26630
На форуме: 5 лет, 9 месяцев
Карма: 591




Цитата (session_on @ 14.03.2016 - 05:37)
Это не совсем парсер

ну судя по тому что ты описал... rolleyes.gif
в любом случае, апач должен обрабатывать http запросы и маскимально быстро выдавать ответ, а тяжелые задачи должны идти отдельным процессом в фоне и не занимать воркер. Инструменты нужно по назначению использовать. wink.gif
PMПисьмо на e-mail пользователю
    0   Для быстрого поиска похожих сообщений выделите 1-2 слова в тексте и нажмите сюда Для быстрой цитаты из этого сообщения выделите текст и нажмите сюда
  Быстрый ответ
Информация о Госте
Введите Ваше имя
Кнопки кодов
Для вставки цитаты, выделите нужный текст и
НАЖМИТЕ СЮДА
Введите сообщение
Смайлики
:huh:  :o  ;) 
:P  :D  :lol: 
B)  :rolleyes:  <_< 
:)  :angry:  :( 
:unsure:  :blink:  :ph34r: 
     
Показать всё

Опции сообщения  Включить смайлики?
 Включить подпись?
 
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:

Опции темы Ответ в темуСоздание новой темыСоздание опроса