[ Поиск ] - [ Пользователи ] - [ Календарь ]
Полная Версия: Lucene, nutch, hadoop
program90
Кто знает и может на пальцах объяснить толком, что это такое конкретно, может быть дать demo.
Ссылки на википедию не предлагать.



Спустя 1 минута, 17 секунд (21.01.2012 - 22:14) program90 написал(а):
То, что это системы какого-то там поиска по базам данным и "фреймворк для написания распределенных приложения" это я нашел. Нужно объяснение толком.

Спустя 9 минут, 58 секунд (21.01.2012 - 22:24) caballero написал(а):
Ты что решил собрать инфу о все продуктах которые встретил в инете? Можеь расскажешь какую задачу собрался решать и тогда тебе пеечислят необходимое?

Спустя 2 минуты, 22 секунды (21.01.2012 - 22:27) program90 написал(а):
caballero
почему всю? Это тематика называется highload.
Если неизвестно, что ответить, неясно зачем тогда отвечать.

Спустя 56 секунд (21.01.2012 - 22:28) program90 написал(а):
Можно хотя бы на один вопрос ответить по существу?

Спустя 7 минут, 59 секунд (21.01.2012 - 22:36) caballero написал(а):
Цитата
Это тематика называется highload.

Так почему бвы не начать с архитектур процессоров например?

Цитата
Можно хотя бы на один вопрос ответить по существу?
Lucene поисковый движок. Это - по существу. К некоему highload отношения имеет не больше что любой другой программмный продукт

Спустя 3 минуты, 9 секунд (21.01.2012 - 22:39) UnWind написал(а):
Lucene:
user posted image

Nutch
user posted image

Hadoop
user posted image

Спустя 15 минут, 22 секунды (21.01.2012 - 22:54) program90 написал(а):
Спасибо
Т.е. получается, что lucene это аналогия google.ru?
А зачем тогда ее требуют предлагают работу? Пишут ли они поисковую систему вроде яндекс?
http://forum.vingrad.ru/forum/topic-337977...y2401159/0.html

Спустя 7 минут, 34 секунды (21.01.2012 - 23:02) caballero написал(а):
Цитата
Т.е. получается, что lucene это аналогия google.ru?

Это поисковый движок а не сайт или портал. и к сайтам как таковым прямого отношения не имеет.

Цитата
А зачем тогда ее требуют предлагают работу?

Потому что тупая блондинко девица - эйчер в распальцованой конторе скопипастила с википедии все что там нашла и засунула в требования к вакансии.
И с этого надо было начать - хочу такую работу - а не перечислять надцать продуктов непонятно зачем.

Спустя 3 минуты, 44 секунды (21.01.2012 - 23:06) program90 написал(а):
caballero
Вообще это используется в социальных сетях.
Просто кто использует эти технологии, тот может вкратце объяснить все это словами

Спустя 4 минуты, 54 секунды (21.01.2012 - 23:10) program90 написал(а):
Просто в инете это не объясняется, только очень коротко. MongoDb лучше расширяется, чем mysql. А почему там нигде не пишут.

Спустя 9 минут, 5 секунд (21.01.2012 - 23:20) caballero написал(а):
Цитата
Вообще это используется в социальных сетях.


Это используется там где надо поисковый движок. Я например SOLR юзал в недавнем проекте.

Цитата
MongoDb лучше расширяется, чем mysql.


Очень спорное утверждение. Кроме того MongoDb не реляционная СУБД - сравнивать с Mysql как минимум некоректно.

Спустя 3 часа, 28 минут, 44 секунды (22.01.2012 - 02:48) Zerstoren написал(а):
Послушайте лекции о БД. Там в 7-9 курсах есть как-раз объяснения о люцене, хадупе и много еще о чем.

http://www.lektorium.tv/course/?id=22828

А вообще, послушайте все лекции, много чего интересного узнаете.

Спустя 10 часов, 50 секунд (22.01.2012 - 12:49) program90 написал(а):
Zerstoren
Спасибо!! Сейчас буду слушать

Спустя 2 минуты, 24 секунды (22.01.2012 - 12:52) program90 написал(а):
caballero
А ты не можешь рассказать подробнее, что это был за проект и зачем там использовался поисковой робот SOLR?

Цитата
Это используется там где надо поисковый движок. Я например SOLR юзал в недавнем проекте.

Спустя 14 минут, 24 секунды (22.01.2012 - 13:06) caballero написал(а):
Цитата
А ты не можешь рассказать подробнее, что это был за проект и зачем там использовался поисковой робот SOLR?

Это поисковый движок а не робот. Как и лусен, сфинкс и прочие. Использовался как обычно для индексации текстов в БД в большом портале для ускорения поиска.

Спустя 41 минута, 4 секунды (22.01.2012 - 13:47) program90 написал(а):
caballero
Т.е. там не пользовались функцией (полнотекстового) поиска в Mysql?
А можно посмотреть по ссылке, что это за сайт?

Спустя 25 минут (22.01.2012 - 14:12) program90 написал(а):
caballero
Правильно ли, что sphinx (или solr) подключается к базе данных. Создает индекс у себя в директории в файле, так как написано в конфигурационноом файле, а потом по нему ищет, при запросе из php.
А если таблицы или колонки не было указано в конфигурационном файле, то поиск перенаправиться к mysql?

Спустя 2 часа, 20 минут, 8 секунд (22.01.2012 - 16:32) caballero написал(а):
Цитата
Правильно ли, что sphinx (или solr) подключается к базе данных. Создает индекс у себя в директории в файле, так как написано в конфигурационноом файле, а потом по нему ищет, при запросе из php.

Да. Впрочем это может быть не только БД - на картинке было нарисовано
Цитата
А если таблицы или колонки не было указано в конфигурационном файле, то поиск перенаправиться к mysql?

Никуда не перенаправится. Откуда он знает куда перенаправлятся.

Спустя 20 минут, 24 секунды (22.01.2012 - 16:53) program90 написал(а):
caballero
Ясно.
Премного благадарен.
Раньше не знал зачем это нужно)
А ты работаешь на высоконагруженном сайте?
а ты не можешь дать ссылку на тот сайт? Просто оценить сколько там материала, какая посещаемость. Почему начали вводить специальный поиск.

Спустя 26 минут, 21 секунда (22.01.2012 - 17:19) vital написал(а):
тс.
Слишком много пытаешься охватить. Все и сразу. И ноду, и хадуп, и еще поисквые двиги примешиваешь. И все это путаешь, не понимая что есть что и несешь всякий бред.
При этом, не имея ни малейшего понятия об основах программирования или теории бд.
Может стоит окончить школу пойти таки в специализированный вуз?

Спустя 12 минут, 7 секунд (22.01.2012 - 17:31) caballero написал(а):
Цитата
а ты не можешь дать ссылку на тот сайт? Просто оценить сколько там материала, какая посещаемость. Почему начали вводить специальный поиск.

ссылку сам не знаю. это для амеров каких то при чем посредников, как я понял со слов прожект манагера. где выложил сайт заказчик понятия не имею - скорее все еще нигде.
Портал информационный типа соц сети только заточенный под определенную тематику.
У нокии например в их Ovi Store используется SOLR.
Неважно. Там где нужен поиск по таблицам с десятками тысяч строк строк и мегабайтами текста и используют поисковые движки. Блоги форумы и т.д. Причем делается не просто поиск по релевантности, используется стемминг и прочие фичи.

Спустя 2 минуты, 8 секунд (22.01.2012 - 17:33) vital написал(а):
Все-равно сфинкс круче wink.gif
Хотя бы по времени индексирвоания) Вот почему вы выбрали именно солр? Люцен понятно тормоз. солр не юзал, сфинкс вроде умеет все эти штуки типа морфологии\стемминга, и куда распространенние. Мне вот просто любыпотно почему солр.

Спустя 8 минут, 57 секунд (22.01.2012 - 17:42) caballero написал(а):
Цитата
Хотя бы по времени индексирвоания) Вот почему вы выбрали именно солр? Люцен понятно тормоз. солр не юзал, сфинкс вроде умеет все эти штуки типа морфологии\стемминга, и куда распространенние. Мне вот просто любыпотно почему солр.


Не я выбирал но как понял у SQLR больше возможеностей для костомизации, запросы в виде веб сервисов и вообще это целая платформа с кластеризацией и прочим фичами. Хотя -да, бегает не так быстро как сфинкс

Спустя 2 часа, 57 минут, 31 секунда (22.01.2012 - 20:40) program90 написал(а):
vital
Цитата

ри этом, не имея ни малейшего понятия об основах программирования или теории бд.
Может стоит окончить школу пойти таки в специализированный вуз?


Откуда такая инфармация. Милейший, теорию бд знаю давно. Окончил кафедру системного программирования в Вузе.
Охватывать тут особо нечего. Такому г... в вузах не учат. Кроме твоего, для таких как ты

Спустя 1 час, 42 минуты, 10 секунд (22.01.2012 - 22:22) vital написал(а):
Цитата (program90 @ 22.01.2012 - 19:40)
vital
Цитата

ри этом, не имея ни малейшего понятия об основах программирования или теории бд.
Может стоит окончить школу пойти таки в специализированный вуз?


Откуда такая инфармация. Милейший, теорию бд знаю давно. Окончил кафедру системного программирования в Вузе.
Охватывать тут особо нечего. Такому г... в вузах не учат. Кроме твоего, для таких как ты

Не заметно. Вообще.

Спустя 1 день, 14 часов, 18 минут, 20 секунд (24.01.2012 - 12:40) program90 написал(а):
vital
ну так ты тупой потому тебе и не заметно.

Спустя 1 час, 40 минут, 14 секунд (24.01.2012 - 14:20) vital написал(а):
Цитата (program90 @ 24.01.2012 - 11:40)
vital
ну так ты тупой потому тебе и не заметно.

Так да. Это я пишу с грамматическими ошибками и путаю элементарные понятия.

Спустя 2 часа, 20 минут, 30 секунд (24.01.2012 - 16:41) program90 написал(а):
vital
это не базовые технологии. если я не знаю что такое websocket или почему mongodb расширяется лучше чем mysql, это не значит что я не знаю теории баз данных. Тем более все это плохо описано, и документов немного. Это не php.

Спустя 3 часа, 48 минут, 20 секунд (24.01.2012 - 20:29) program90 написал(а):
vital
И еще укажи, где я путаю элементарные понятия. Когда говоришь, нужно говорить конкретно а не в общем.
То что hadoop и lucene не связаны - я знаю. А то, что это используется в крупных сложных проектах, а не в тех сайтах которые делают в средних вебстудиях, это их и объединяет.
Кому может понадобиться lucene на сайте адвокатской фирмы.
Быстрый ответ:

 Графические смайлики |  Показывать подпись
Здесь расположена полная версия этой страницы.
Invision Power Board © 2001-2025 Invision Power Services, Inc.