Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Сравнение СУБД Новый топик    Ответить
Топик располагается на нескольких страницах: Ctrl  назад   1 [2] 3   вперед  Ctrl      все
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Alexander Ryndin
Member

Откуда:
Сообщений: 4919
Блог
Тени забытых СУБД
pkarklin
пропущено...


56 гиг - это бигдата?! Мда...


Ну типа да. Хотябы потому что это не raw данные.
Это дискретные 56 гиг / 10 символов среднее слово с пунктуацией = 5.6 млрд фактов в базе.
К томуже у меня не только этот сайт в хранилище, общее хранилище сейчас достигает 0.8 ТБ данных
и соответственно 80 миллиардов фактов. Правда данные оень сильно пожаты, потому выглядит и по скорости по фактическим обьемам все оптимистично.
аж 800 ГБ. Больше чем у меня диск в ноутбуке. Мельчает бигдата
2 июл 15, 00:39    [17840863]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Alexander Ryndin
Тени забытых СУБД
пропущено...


Ну типа да. Хотябы потому что это не raw данные.
Это дискретные 56 гиг / 10 символов среднее слово с пунктуацией = 5.6 млрд фактов в базе.
К томуже у меня не только этот сайт в хранилище, общее хранилище сейчас достигает 0.8 ТБ данных
и соответственно 80 миллиардов фактов. Правда данные оень сильно пожаты, потому выглядит и по скорости по фактическим обьемам все оптимистично.
аж 800 ГБ. Больше чем у меня диск в ноутбуке. Мельчает бигдата


Здесь все зависит от подхода. Если эти 800 гб забить фильмами, музыкой и играми, то это не бигдата.
А если в этих 800 гб хранить 80 млрд фактов, тоесть такая себе табличка где о каждом жителе земли хранится минимум 12 фактов, то да, это БигДата. Поскольку по этим данным можно применять разные статистические методы, строить колосальных размеров графы, запускать алгоритмы вычислительная емкость которых сутки и тд.
2 июл 15, 01:12    [17840954]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Распиливаю ядро отечественной субд-поисковика.
Добавил новый тег @title. Он говорит что искать нужно только в заголовках темы
Например такой запрос даст все темы где есть в заголовке слово москва и картинка

Все бегает довольно активно
3 июл 15, 18:34    [17850383]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
такой запрос даст все темы где есть в заголовке слово москва и
картинка

Прэээлесно... А на "картинко масквы" оно откликнется? Гугль - да.

Posted via ActualForum NNTP Server 1.5

3 июл 15, 18:43    [17850409]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
такой запрос даст все темы где есть в заголовке слово москва и
картинка

Прэээлесно... А на "картинко масквы" оно откликнется? Гугль - да.


А на картинко и видео Москвы запощеные за сегодня на sql.ru
Гугол как ?
3 июл 15, 18:54    [17850435]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
Гугол как ?

Ништяк. Открой уже для себя его справку по поисковым тэгам.

Posted via ActualForum NNTP Server 1.5

3 июл 15, 18:58    [17850446]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
Гугол как ?

Ништяк. Открой уже для себя его справку по поисковым тэгам.


Запрос ?
3 июл 15, 19:02    [17850458]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
"картинко масквы"


На счет мемов, баян же:
Booben VS Google
3 июл 15, 19:04    [17850462]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
Запрос ?

http://www.google.cz/search?nord=1&q=пикча столицы&gws_rd=cr&ei=QK2WVbSAA8KBUZCTg5gI#q=site:sql.ru картинко масквы&nord=1&tbs=qdr:d

Posted via ActualForum NNTP Server 1.5

3 июл 15, 19:09    [17850482]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
Запрос ?

http://www.google.cz/search?nord=1&q=пикча столицы&gws_rd=cr&ei=QK2WVbSAA8KBUZCTg5gI#q=site:sql.ru картинко масквы&nord=1&tbs=qdr:d


Самому не смешно ?

Где там картинки москвы за сегдоня с сайта скуль ру ?
3 июл 15, 19:15    [17850497]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
Где там картинки москвы за сегдоня с сайта скуль ру ?

Написано же: "ничего не найдено". У тебя, кстати, тоже исключительно левая выдача.

Posted via ActualForum NNTP Server 1.5

3 июл 15, 19:24    [17850523]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
Где там картинки москвы за сегдоня с сайта скуль ру ?

Написано же: "ничего не найдено". У тебя, кстати, тоже исключительно левая выдача.


Что значит "тоже левая выдача" ?
У меня ищет картинки москвы с конкретного ресурса. Это можно сделать.
Можно указать за какой период, оказать окраску текста и еще много разных опций.
Ты сказал что это можно сделать через гугл. Покажи запрос через гугл, чтоб он выдавал не темы про дельфи в допе по запросу "картинко москвы".
3 июл 15, 19:28    [17850531]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
У меня ищет картинки москвы с конкретного ресурса.

Ага, и первой же картинкой в результате (по твоей же ссылке парой постов выше) идёт
какая-то киношная тёлка из геймдева, а вторая - вообще не с sql.ru.

Posted via ActualForum NNTP Server 1.5

3 июл 15, 19:31    [17850538]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
У меня ищет картинки москвы с конкретного ресурса.

Ага, и первой же картинкой в результате (по твоей же ссылке парой постов выше) идёт
какая-то киношная тёлка из геймдева, а вторая - вообще не с sql.ru.


Не вопрос. У меня там много фоток с форума ixbt.com который недавно ушел в индексацию.
Покажи запрос через гугль который вернет фотки москвы с форума ixbt.com
3 июл 15, 19:40    [17850563]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Мой запрос вот такой

http://booben.com/Query?q2=CustomPhrase sixbt @title москва @img 1&s=online&a=search&p=1
3 июл 15, 19:41    [17850569]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
Покажи запрос через гугль который вернет фотки москвы с форума
ixbt.com

https://www.google.ru/search?newwindow=1&hl=ru&site=imghp&tbm=isch&source=hp&biw=1168&bih=597&q=site:ixbt.ru Москва&oq=site:ixbt.ru Москва&gs_l=img.3...1928.11492.0.12660.19.6.0.13.0.0.202.700.3j2j1.6.0....0...1ac.1.64.img..14.5.484.S2IOTliiKjI#newwindow=1&hl=ru&tbm=isch&q=site:ixbt.com Москва

Posted via ActualForum NNTP Server 1.5

3 июл 15, 19:48    [17850589]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
Покажи запрос через гугль который вернет фотки москвы с форума
ixbt.com

https://www.google.ru/search?newwindow=1&hl=ru&site=imghp&tbm=isch&source=hp&biw=1168&bih=597&q=site:ixbt.ru Москва&oq=site:ixbt.ru Москва&gs_l=img.3...1928.11492.0.12660.19.6.0.13.0.0.202.700.3j2j1.6.0....0...1ac.1.64.img..14.5.484.S2IOTliiKjI#newwindow=1&hl=ru&tbm=isch&q=site:ixbt.com Москва


Молодец, додумался переключится на вкладку фотки.
Работает пока что лучше.
Потому стоят 300 млрд

Я в плане распознования фоток вообще не работаю, но фичу когда можно вернуть все фотки с ресурса за сегодня/вчера нахожу у себя интересной и ею пользуюсь каждый день.
3 июл 15, 20:02    [17850626]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54789

Тени забытых СУБД
фичу когда можно вернуть все фотки с ресурса за сегодня/вчера
нахожу у себя интересной и ею пользуюсь каждый день.

Pornhub добавил в список индексируемых? Да, это убойная фича, спрос обеспечен.

Posted via ActualForum NNTP Server 1.5

3 июл 15, 20:10    [17850652]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Dimitry Sibiryakov
Тени забытых СУБД
фичу когда можно вернуть все фотки с ресурса за сегодня/вчера
нахожу у себя интересной и ею пользуюсь каждый день.

Pornhub добавил в список индексируемых? Да, это убойная фича, спрос обеспечен.


чем гугль и яндекс не устраивает ?
У меня не адалт направление.
Хотя и он ищется как в любом нормальном поисковике.
3 июл 15, 20:49    [17850753]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
Сравниваем поисковики

+

Картинка с другого сайта.
5 июл 15, 19:50    [17854504]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
tanglir
Member

Откуда:
Сообщений: 28966
Зато гугл сразу ищет картинки

+
Картинка с другого сайта.


Но яндекс тупит, да.
6 июл 15, 07:01    [17855599]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
этта
Guest
Dimitry Sibiryakov
Тени забытых СУБД
Давайте я вам ченить интересненького расскажу, например, как
получить все темы sql.ru где есть 2000я страница.

Это не интересно. Лучше посчитай количество тем, которые начинаются с сообщения автора,
который "раньше с БД дела не имел".

автор
"раньше никогда с БД не работал"

17856405

-- это не про
автор
С группировкой по разделам это даст название СУБД, управление которой доверяют нулевым
эникейщикам чаще всего.


а про "кидарсы, сэр, решили срочно импорт--заместиться, сэр". (или "жизнь и приключения незнайки в стране непуганых кидарасов")
6 июл 15, 12:07    [17856612]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
+

Картинка с другого сайта.
6 июл 15, 19:05    [17859022]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
+

Картинка с другого сайта.
6 июл 15, 20:21    [17859212]     Ответить | Цитировать Сообщить модератору
 Re: Поисковые стримы Sql.Ru и других сайтов  [new]
Тени забытых СУБД
Guest
+

Картинка с другого сайта.
6 июл 15, 20:24    [17859225]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: Ctrl  назад   1 [2] 3   вперед  Ctrl      все
Все форумы / Сравнение СУБД Ответить