Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Сравнение СУБД Новый топик    Ответить
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
 Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
Подскажите, пожалуйста, СУБД которая оптимально работала бы в таком режиме:
База периодически пополнятеся значительными объемами данных - сотни килобайт в минуту.
Одновременно к этой базе выполняются запросы на чтение в произвольном порядке и произвольного объема.

Спасибо.
17 июл 09, 23:06    [7431749]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54840

Та, которую знаешь.

Posted via ActualForum NNTP Server 1.4

17 июл 09, 23:28    [7431773]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Зайцев Фёдор
Member

Откуда: Лужки
Сообщений: 5308
FB
17 июл 09, 23:41    [7431795]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
А про MonetDB никто ничего не скажет?
18 июл 09, 07:40    [7431977]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
Если они все достаточно хороши. Тогда можте подскажете benchmark?
Скачал TPC-H, но он генерит набора таблиц и запросов, а как насчет обработки параллельных запросов и большого числа сессий?
18 июл 09, 07:46    [7431980]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 32174
korisk
Скачал TPC-H, но он генерит набора таблиц и запросов, а как насчет обработки параллельных запросов и большого числа сессий?
Тогда надо TPC-C
24 июл 09, 12:03    [7455581]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Выбегалло
Member

Откуда: Scottsdale, AZ, USA
Сообщений: 3823
"Сотни килобайт в минуту" были "большим объемом информации" году так в 1995.
27 июл 09, 23:50    [7466639]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
Тогда надо TPC-C

а где его взять мжно? на родном TPC сайте тлько исходники H версии нашёл. :(

Сотни килобайт в минуту" были "большим объемом информации" году так в 1995.


Про сотни это я преуменьшил. Нескольок мегобайт в минуту. Кстати у Postgres запись 10000 инсертов интов в таблицу с тысячью столбцов занимает 35 секунд. Для mysql - 16 секунд. Для MonteDB 5 минут :)

Кстати, никто не знает способа заполнять базу минуя SQL. Т.к. чтобы записать 10 мегобайт данных в базу приходиться формировать 60MB SQL кода.?
Если есть подобный опыт, то на каких СУБД. Вобщем, что посоветуете? )
Спасибо.
30 июл 09, 20:28    [7481633]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54840

korisk

Кстати, никто не знает способа заполнять базу минуя SQL. Т.к. чтобы
записать 10 мегобайт данных в базу приходиться формировать 60MB SQL кода.?

Все СУБД (за исключением мускуля, наверное) поддерживают
параметризованные запросы.

Posted via ActualForum NNTP Server 1.4

30 июл 09, 20:47    [7481662]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
miksoft
Member

Откуда:
Сообщений: 38921
korisk
таблицу с тысячью столбцов
не маразм ли?
korisk
Кстати, никто не знает способа заполнять базу минуя SQL.
Практически у всех СУБД есть средства прямой загрузки данных в таблицы без построения массы SQL-запросов. У MySQL это mysqlimport/LOAD DATA INFILE.
Dimitry Sibiryakov
Все СУБД (за исключением мускуля, наверное) поддерживают
параметризованные запросы.
MySQL тоже поддерживает.
30 июл 09, 21:38    [7481779]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
miksoft
korisk
таблицу с тысячью столбцов
не маразм ли?
korisk

Может и маразм. Но это вопрос нормализации против скорости выборки. Каково время записи 1000000 строк в таблицу из 10 столбцов не проверял.

Суть задачи в том, чтобы ежеминутно сохранять значения нескольких десятков(возможно сотен) тысяч независимых величин. Причем с разными типами значений. (разные датчики). Ну и соответственно иметь к показаниям быстрый доступ. Может что-нибудь посоветуете?
miksoft

korisk

Кстати, никто не знает способа заполнять базу минуя SQL.
Практически у всех СУБД есть средства прямой загрузки данных в таблицы без построения массы SQL-запросов. У MySQL это mysqlimport/LOAD DATA INFILE.
Dimitry Sibiryakov
Все СУБД (за исключением мускуля, наверное) поддерживают
параметризованные запросы.
MySQL тоже поддерживает.

Спасибо.
31 июл 09, 01:11    [7482206]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korg
Member

Откуда:
Сообщений: 241
korisk,

Oracle, количество примочек большое, можно настраивать как угодно и под что угодно. Правда потребует серьёзного железа.
31 июл 09, 08:16    [7482434]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
прикалист
Guest
korg
korisk,

Oracle, количество примочек большое, можно настраивать как угодно и под что угодно. Правда потребует серьёзного железа.



Не катит пользовательские сессии oracle читают с диска синхронно :)

з.ы. С праздником http://www.sysadminday.com/ :)
31 июл 09, 11:06    [7483281]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
AlexKB
Member

Откуда: Запорожье
Сообщений: 856
Для решения подобных задач я использую СУБД Cache от InterStstems.
31 июл 09, 13:26    [7484338]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
AlexKB
Для решения подобных задач я использую СУБД Cache от InterStstems.

o! Спасибо большое. Сейчас буду смотреть.
31 июл 09, 19:14    [7486450]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
korisk
Member

Откуда:
Сообщений: 52
korisk
AlexKB
Для решения подобных задач я использую СУБД Cache от InterStstems.

o! Спасибо большое. Сейчас буду смотреть.

а-а-а! она проприетарная :(
31 июл 09, 21:26    [7486665]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Зайцев Фёдор
Member

Откуда: Лужки
Сообщений: 5308
korisk
а-а-а! она проприетарная :(

да, теперь не отмоешься
31 июл 09, 22:24    [7486775]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
AlexKB
Member

Откуда: Запорожье
Сообщений: 856
korisk
AlexKB
Для решения подобных задач я использую СУБД Cache от InterStstems.

o! Спасибо большое. Сейчас буду смотреть.


Если перед Вами действительно стоит проблема, то стоит не смотреть, а исследовать возможные пути решения проблемы на технологиях InterSytems. Сразу скажу, путей решения много, и за Вами будет выбор оптимального решения. Вам предстоит потратить время и усилия.

Если Вас действительно заинтересует Cache, то стоит обратиться непосредственно к консультантам InterSystems. Они Вам подскажут много чего интересного, помогут с выбором типа лицензии, предоставят временные лицензии. Скоростные характеристики оценивать необходимо на боевой версии Cache и временных лицензиях.

Если Вам действительно необходима консультация от партнеров-разработчиков InterSystems, то лучше Вам поспрашивать по этим ссылкам:


[url=]https://www.sql.ru/forum/actualtopics.aspx?bid=56


Во всяком случае, люди котрые там общаются, никогда никого не поливают грязью.
Разве что забежит какой-нибудь индеец.

Лично я готов Вас не убеждать, а помочь Вам, чем смогу, в Ваших исследованиях.
1 авг 09, 10:35    [7487274]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
AlexKB
Member

Откуда: Запорожье
Сообщений: 856
Извиняюсь, ошибся со ссылками. Вот они:

https://www.sql.ru/forum/actualtopics.aspx?bid=56

http://writeimagejournal.com/forum/

http://www.intersystems.ru/
1 авг 09, 10:39    [7487280]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Gluk (Kazan)
Member

Откуда:
Сообщений: 9365
AlexKB

Разве что забежит какой-нибудь индеец.


рассовая ненависть ?
1 авг 09, 11:09    [7487296]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
AlexKB
Member

Откуда: Запорожье
Сообщений: 856
Gluk (Kazan)
AlexKB

Разве что забежит какой-нибудь индеец.


рассовая ненависть ?


Нет никакой ненависти.
Индеец - это так, к слову. Человек, который выражает собственное мнение, выдавая его за обощенной мнение всего племени, или что еще хуже, за единственно правильное мнение всего индейского народа.
Оставим индейцев в покое.

Пусть форумчане ведут себя прилично, а модераторы пусть не играют в одни ворота.
Фемида слепа!

Надоело просто читать всякий бред с доводами "дворовых мальчишек".
У вас есть мнение, мысль - пожалуйста.
Вы хотите вступить в конструктивный спор - пожалуйста.
Но нечего вешать ярлыки. Тем более, что они совершенно необоснованы и указываю лишь на невежество вешающего.

Это все я пишу не Вам лично, Gluk (Kazan), а вообще.
1 авг 09, 12:26    [7487356]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Gluk (Kazan)
Member

Откуда:
Сообщений: 9365
AlexKB

Это все я пишу не Вам лично, Gluk (Kazan), а вообще.


я понимаю, что корни ваших обид на этом форуме глубоки,
но с моей точки зрения, кастовость в в ваших рядах сильна черезмерно.

Это не наезд, просто IMHO
1 авг 09, 13:01    [7487380]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
AlexKB
Member

Откуда: Запорожье
Сообщений: 856
Gluk (Kazan)
AlexKB

Это все я пишу не Вам лично, Gluk (Kazan), а вообще.


я понимаю, что корни ваших обид на этом форуме глубоки,
но с моей точки зрения, кастовость в в ваших рядах сильна черезмерно.

Это не наезд, просто IMHO


Моих личных обид тут нет.
Мне обидно за тех посетителей форума, которые ждут помощи, консультации.
И что они видят из переписки по заявленной теме - 1% имеющего отношения к вопросу, а все остальное просто всякий бред.

PS: Казань - город красивый. Я в Казани в армии заканчивал службу. Правда пиво там было плохое, тогда.

PS: КАСТА - "Замкнутая общественная - сословная или профессиональная - группа, доступ в которую для посторонних затруднителен или невозможен". Ну и где же правда в Ваших словах.
1 авг 09, 13:41    [7487398]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Gluk (Kazan)
Member

Откуда:
Сообщений: 9365
AlexKB

PS: КАСТА - "Замкнутая общественная - сословная или профессиональная - группа, доступ в которую для посторонних затруднителен или невозможен". Ну и где же правда в Ваших словах.


Не мне судить. У меня нет претензий на "правду". Я всего лишь высказал свое мнение.
А за тех посетителей логичнее тем посетителям и обижаться, вы не находите?
А то ведь так вот, более за всех страждущих, недолго и язву заработать

До скорого
1 авг 09, 13:49    [7487402]     Ответить | Цитировать Сообщить модератору
 Re: Ежеминутное пополнение и асинхронное чтение. Подскажете СУБД под режим работы.  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54840

AlexKB

Мне обидно за тех посетителей форума, которые ждут помощи, консультации.

Если они не в состоянии даже выбрать себе сервер или слишком ленивы
чтобы быть в курсе возможностей шести наиболее популярных серверов, то
какая консультация может им помочь?..

ЗЫ: Нормальное в Казани пиво. По крайней мере год назад таковым оно было.

Posted via ActualForum NNTP Server 1.4

1 авг 09, 14:17    [7487431]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
Все форумы / Сравнение СУБД Ответить