Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Сравнение СУБД Новый топик    Ответить
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
 Какую СУБД выбрать для огромной базы?  [new]
Dmitry123
Member

Откуда:
Сообщений: 3
В общем такой возник вопрос.
Собрались на работе делать систему. Чтобы было понятнее, это будет что-то вроде системы интернет статистики (не она совсем, но принцип похожий). Допустим, что-то типа хотлога. Масштабы - очень большие. Объем данных - порядка 10-20 Гб.

Причем это все скорее всего будет в одной базе на одной машине.
Машину под это дело выделять. Посоветуйте, какое нужно железо под такую базу?

И потянет ли MySQL такие ресурсы? Возможный выбор - либо MySQL, либо PostgreeSQL. У нас просто никто больше ни с чем не работает :)
Заранее всем огромное спасибо.
26 ноя 04, 17:02    [1139881]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Scott Tiger
Member

Откуда: вмваре
Сообщений: 6905
10-20Гб - это, по классификации Oracle, совсем чуть-чуть больше, чем тестовая ("игровая") БД

Требую отставки Президента РФ
Картинка с другого сайта.
26 ноя 04, 17:04    [1139889]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
locky
Member

Откуда: Харьков, Украина
Сообщений: 62034
>10-20Гб - это, по классификации Oracle, совсем чуть-чуть больше, чем тестовая ("игровая") БД

учитывая что....


Возможный выбор - либо MySQL, либо PostgreeSQL

выбор невелик :-)

Posted via ActualForum NNTP Server 1.1

26 ноя 04, 17:11    [1139929]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Dmitry123
Member

Откуда:
Сообщений: 3
locky
>10-20Гб - это, по классификации Oracle, совсем чуть-чуть больше, чем тестовая ("игровая") БД

учитывая что....

[quot ]
Возможный выбор - либо MySQL, либо PostgreeSQL

выбор невелик :-)

и с чего выбирать? :)
26 ноя 04, 17:19    [1139951]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
tygra
Member

Откуда: Тверь (Иркутск, Край)
Сообщений: 9997
MS SQL, Oracle, Sybase ASA....

-- Tygra's --
26 ноя 04, 17:34    [1140011]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Sarin
Member

Откуда: Земля, Солнечная система.
Сообщений: 14485
Примерное (или точное) количество полей? Вообще 10-20 гигов для МуСКЛа не проблема. Если объём одной записи не очень велик.
26 ноя 04, 18:37    [1140240]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Dmitry123
Member

Откуда:
Сообщений: 3
примерный объем одной записи - 300 байт.
26 ноя 04, 21:58    [1140663]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Sarin
Member

Откуда: Земля, Солнечная система.
Сообщений: 14485
По идее МуСКЛ должен проглатить. Но могут начаться пляски с бубном, и потребуется специально обученный плясальщик.
26 ноя 04, 22:47    [1140703]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
e60
Member

Откуда:
Сообщений: 89
Вообще лучше Oracle или SyBase. Советую сразу серьезную БД использовать.
Сам начитался сказок про т как MYSQL миллиарды записей держит :).
А если выбирать из этих 2, то лучше Postgres возможности гораздо шире и SQL диалект оченнь близок к Oracle.
27 ноя 04, 15:05    [1141256]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
DmitryY
Guest
SyBase - а он платный под Линукс?
Оракл-то по деньгам вообще не потянуть...
29 ноя 04, 13:49    [1143771]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
softwarer
Member

Откуда: 127.0.0.1
Сообщений: 67468
Блог
e60
А если выбирать из этих 2, то лучше Postgres возможности гораздо шире и SQL диалект оченнь близок к Oracle.

Postges - версионник, что хорошо. Но у него жаловались на проблемы со сборкой мусора при активном обновлении данных - что может оказаться очень существенно в такой системе, если идет предвычисление агрегатов.

e60
Оракл-то по деньгам вообще не потянуть...

Для интернета - будет тяжело. Но если проект серьезный - можно попробовать договориться с ораклом, у них есть партнерский отдел с довольно широкими полномочиями. Грубо говоря, если готовы "заплатить в принципе" - попробуйте выяснить.

Тем более, что для системы порядка хотлоговской затраты потребуются куда большие.
29 ноя 04, 14:59    [1144142]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Хрен
Member

Откуда: Brisbane
Сообщений: 1455
e60
Сам начитался сказок про т как MYSQL миллиарды записей держит :).
А если выбирать из этих 2, то лучше Postgres возможности гораздо шире и SQL диалект оченнь близок к Oracle.


Сказок? Хмм.. Вот у меня под рукой mysql база на 28 гиг.. А насчет постгреса, то не нужно строить иллюзий, на таких обьемах ему потребуется не меньше плясальщиков с бубном. А результат по скорости - не факт, что будет лучшим.
29 ноя 04, 16:37    [1144579]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
mayton
Member

Откуда: loopback
Сообщений: 53009
У нас администрируют промышленный АСКР под Oracle 9i. Размер табличных пространств 0.4 Tb. Пока количественных ограничений не было замечено.
Софт клиента правда несколько раз переписывали. Разрядности Power Builder-овских типов данных не хватило для фиксации Oracle-овских NUMBER типов.
29 ноя 04, 16:51    [1144637]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Хрен
Member

Откуда: Brisbane
Сообщений: 1455
можете еще поэксериментировать с maxdb - бывшим sapdb
29 ноя 04, 18:05    [1144948]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Andron
Member

Откуда: Cherepovets
Сообщений: 1816
Смотреть в сторону SAP DB (MAX DB), или например Informix (если хочется платную СУБД).
29 ноя 04, 22:02    [1145249]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
bushmen
Member

Откуда: г. Москва
Сообщений: 828
Можешь еще в сторону Cache' посмотреть.
1 дек 04, 23:31    [1150956]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Sp1Der
Member

Откуда: Санкт-Петербург
Сообщений: 39
на VDS (Versant Development Suite) реализованы такие базы как Factiva.com (серьезные люди делали Dow Jones и Reuters) она содержит 2 Терабайта инфы (!!!) и каждый день пополняется на несколько Гигов (!!!!!) можно и на русском посмотреть сдесь
13 дек 04, 16:51    [1177936]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
hell
Member

Откуда:
Сообщений: 3001
Размер базы - где-то между маленькой и средней, любая из современных СУБД с ней будет работать нормально
14 дек 04, 17:09    [1180640]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
SergSuper
Member

Откуда: SPb
Сообщений: 5488
Чё-то как-то прочитав такое сразу интерес пропадает:

Лучшее решение в области глобальной бизнес информации

Никогда еще не было так важно быть в курсе последних событий, способных повлиять на Ваш бизнес. Factiva.com обеспечит Вашу информированность, открыв доступ к оперативной бизнес информации и последним новостям. Отныне поиск информации по компаниям, отраслям и странам прост и удобен, как никогда прежде. Наша уникальная, завоевавшая множество наград, служба следующего поколения информационных услуг будет доступна для всей вашей компании через Интернет. Двадцатилетний опыт работы в области информации таких компаний, как Dow Jones и Reuters, создавших Factiva.com, дал возможность объединить уникальную функциональность и самые последние технологии, которые, несомненно, позволят Вам всегда быть в курсе последних событий.

«Шедевр информационного вооружения»

Именно так описывают Factiva.com исследователи. Созданная специально, чтобы поддерживать и удовлетворять информационные потребности организации в целом, Factiva.com обеспечит Вас только необходимой точной информацией из более, чем 8000 источников 118 стран мира на 22 языках. Не имеющий аналогов состав источников, мощные инструменты поиска информации, гибкая система ее хранения и запоминания, персонифицированность доступа к базе, новые административные инструменты, а также наша поддержка до, во время и после внедрения службы Factiva.com делают ее поистине уникальным информационным решением для любой компании.
14 дек 04, 17:30    [1180718]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Sp1Der
Member

Откуда: Санкт-Петербург
Сообщений: 39
Речь идет не о том, что там понаписано, а о том, какого объема данные там хранятся...
16 дек 04, 20:55    [1187245]     Ответить | Цитировать Сообщить модератору
Между сообщениями интервал более 1 года.
 Re: Какую СУБД выбрать для огромной базы?  [new]
john222
Member

Откуда:
Сообщений: 37
Вопрос:

В планах создание Интернет поисковой системы, будет индексироваться web контент, файлы с текстом. Вообщем около 20-30Gb текстовой информации и нужно будет по всему этому осуществлять полнотекстовый поиск (желательно с учетом русской морфологии), инсертов будет не много. Что выбрать?
4 янв 06, 20:17    [2229568]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
shuklin
Member

Откуда: Харьков
Сообщений: 799
john222
Вопрос:

В планах создание Интернет поисковой системы, будет индексироваться web контент, файлы с текстом. Вообщем около 20-30Gb текстовой информации и нужно будет по всему этому осуществлять полнотекстовый поиск (желательно с учетом русской морфологии), инсертов будет не много. Что выбрать?


Писать свое.
4 янв 06, 20:29    [2229592]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
john222
Member

Откуда:
Сообщений: 37
А какая СУБД будет ближайшая по оптимальности?

Думаю попробывать Mysql и Mssql 2005

ОС Win 2003.
5 янв 06, 19:22    [2231274]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
shuklin
Member

Откуда: Харьков
Сообщений: 799
john222
А какая СУБД будет ближайшая по оптимальности?

Думаю попробывать Mysql и Mssql 2005

ОС Win 2003.


Для выни логично обратить внимание на MSSQL у них там и фулл текст серч имеется. Однако задачка требует оригинальных подходов http://www.webplanet.ru/news/reading-room/2005/12/5/archit.html , а если еще и Русскую морфологию нужно учитывать ...
5 янв 06, 19:39    [2231298]     Ответить | Цитировать Сообщить модератору
 Re: Какую СУБД выбрать для огромной базы?  [new]
Cat2
Member

Откуда: Petroskoi, Karjala
Сообщений: 145754
Если надо фулл текст серч с морфологией на русском, то о бесплатности надо забыть. Я точно знаю только то, что этот функционал стоит нехилых денег. Этот функционал работает на этом форуме. У народа есть немало претензий к поиску по форуму, но на морфологию вроде никто не жаловался.
6 янв 06, 16:13    [2232833]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
Все форумы / Сравнение СУБД Ответить