Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Сравнение СУБД Новый топик    Ответить
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
 ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
Добрый день Друзья,
Как поживаете? Надеюсь у вас все хорошо.
Начну с главного, мы начали проект по хранилищу данных.
В данный момент определились с интеграционной программой ETL ODI 12 (Oracle Data Integration).

и мы предложили следующее:
БД - ORACLE 12 (OLTP partitioned построчно) или POSTGRESQL(Greenplum полоколоночно)
ETL- ODI 12
BI - SAP BI


Почему POSTGRE начали рассматривать, потому что цена приемлемая и БД OLAP.

Мне нужны все плюсы и минусы БД ORACLE и POSTGRE

В общем до завтра надо определиться с программами, но я хз о преимуществах данного программного продукта.
Помогите советом.

В форуме начал темы сравнения, но они 2008 года и думаю что в данный момент эти информации не актуальные.
4 окт 18, 15:25    [21695353]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
H5N1
Member

Откуда: Yo.! из "Сравнения субд"
Сообщений: 586
а источник что за субд? у оракла 12 есть In-Memory Column Store. логичней его противопоставлять Greenplum
4 окт 18, 16:53    [21695501]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 54759

H5N1
логичней

Кого волнует логика при выборе "на чём бы попилить"? Оракул рулит!

Posted via ActualForum NNTP Server 1.5

4 окт 18, 17:03    [21695512]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
H5N1, OLAP ORACLE дорого стоит. Можем себе позволить OLTP partitioned или GreenPlum
5 окт 18, 06:35    [21695939]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
Dimitry Sibiryakov,

Я сам с ораклист, но в greenplum меня заинтриговал OLAP, но так как опыта с данным продуктом не было я хотел бы получить совет.

Параллельно читаю достоинства и недостатки построчного и поколоночного хранения данных.
5 окт 18, 07:08    [21695943]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Бумбараш
Member

Откуда: никем не победимая, самая любимая
Сообщений: 3057
в гринпламе по дефолту построчное хранение. У нас сейчас в GP все строчное, например.

у кого есть опыт там применения колонок и насколько широко?

у кого ГП будете покупать, у пивотал или наши поделки от аренадаты?
5 окт 18, 15:52    [21696537]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Ivan Durak
Member

Откуда: Minsk!!!
Сообщений: 3787
Бумбараш
в гринпламе по дефолту построчное хранение. У нас сейчас в GP все строчное, например.

у кого есть опыт там применения колонок и насколько широко?

у кого ГП будете покупать, у пивотал или наши поделки от аренадаты?

мы применяли колоночное. Вполне работает.
Но это мелочь. Сила гринплама в MPP кластере!! Оракл у вас односерверный. А на гп у вас может быть 10-ки серверов в паралели.
А слабость - в администрировании - нужные реально топовые активные админы гринплама. А таких во всех РФ 3 штуки.
8 окт 18, 11:45    [21697859]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Ivan Durak
Member

Откуда: Minsk!!!
Сообщений: 3787
еще сложность с вашим ODI будет.
Он умеет ELT и Push-down или кастомный sql под трансформациями?
Greenplum силен в ELT парадигме. Ресурсами ODI трансформы делать - терять всю мощь MPP кластера
8 окт 18, 11:52    [21697866]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Alexander Ryndin
Member

Откуда:
Сообщений: 4919
Блог
Ivan Durak
еще сложность с вашим ODI будет.
Он умеет ELT и Push-down или кастомный sql под трансформациями?
Greenplum силен в ELT парадигме. Ресурсами ODI трансформы делать - терять всю мощь MPP кластера
Как раз таки основная фишка ODI это ELT, а pushdown там нет, потому что pushdown это придумка ETL инструментов, которые не умеют полный ELT делать. Так что ODI, если так можно выразиться, это полный pushdown.
8 окт 18, 14:03    [21698079]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Бумбараш
Member

Откуда: никем не победимая, самая любимая
Сообщений: 3057
Скорее ОДИ это ELT, который не может ETL.

Как он будет работать с гринпламом - вот этот вопрос стоит провентилировать.
8 окт 18, 14:10    [21698102]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Alexander Ryndin
Member

Откуда:
Сообщений: 4919
Блог
Бумбараш
Скорее ОДИ это ELT, который не может ETL.

Как он будет работать с гринпламом - вот этот вопрос стоит провентилировать.
Может он и ETL. Просто best practice для ODI это ELT.
8 окт 18, 14:45    [21698167]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Бумбараш
Member

Откуда: никем не победимая, самая любимая
Сообщений: 3057
Бест практис это не использовать ODI )

Или любую другую ETL-поделку за 100+к усд
8 окт 18, 14:52    [21698183]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
Бумбараш,

разработал ХД с нуля для банка с помощью ODI 11 версии. нормально работает.

а в чем в принципе недостаток ?
8 окт 18, 15:03    [21698196]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Alexander Ryndin
Member

Откуда:
Сообщений: 4919
Блог
Бумбараш
Бест практис это не использовать ODI )

Или любую другую ETL-поделку за 100+к усд
А что использовать?
8 окт 18, 15:11    [21698204]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Shtock
Member

Откуда: СПб
Сообщений: 3049
ну всё опенсурсофилы либо костылят на питоне етл, либо пентахо
9 окт 18, 10:55    [21698980]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Shtock
Member

Откуда: СПб
Сообщений: 3049
ну а насчёт оракл инмемори это цена * 2 и в нём куча нюансов. посмотри на дистрибутив гринплама от ArenaData. народ весьма забавно собрал.
9 окт 18, 10:57    [21698985]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
Shtock,

Вы имеете ввиду утилиту для администрирования Greenplum?
Так эта утилита стоит 54000 долларов ) плюс админов я не нашел, которые имели опыт с работы ГП
9 окт 18, 13:03    [21699181]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Shtock
Member

Откуда: СПб
Сообщений: 3049
ну я бы не был так категоричен в названии дистрибутива утилитой, но да :)

ну а насчёт ГП да, там те кто в теме в тинькове, ростелекоме и газпромнефти, хотя мне кажется людей можно прекрасно обучить
9 окт 18, 16:41    [21699477]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
pkarklin
Member

Откуда: Москва (Муром)
Сообщений: 74930
При прочтении сего рыдалъ. Смешались в кучу хранилища без описания требования к оным, и оценки TCO на уровне "а там сказали дешевле", но для затравки.
9 окт 18, 23:21    [21699869]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
pkarklin,

расскажите. не держите в себе. =)
10 окт 18, 06:39    [21700001]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Yelibay
Member

Откуда:
Сообщений: 45
Shtock,

Я был против ГП так как специалистов нету. Искал по всему сайту, но администратора с опытом работы с ГП не нашел.
Я знаю что можно обучить, но зависит от не его в будущем не хочу, если он уйдет мне придет взять другого админа и его обучать.

в итоге решили сделать так

Решение по СУДБ.
STAGE область - POSTGRE
PREPARE область - POSTGRE
DWH область - ORACLE

решение по ETL ODI 12

решение по BI
SAP BO - Средство дизайна информации и WEB intelegence. Эти программы идут в стэке.
10 окт 18, 06:41    [21700002]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Бумбараш
Member

Откуда: никем не победимая, самая любимая
Сообщений: 3057
Yelibay
разработал ХД с нуля для банка с помощью ODI 11 версии. нормально работает.

а в чем в принципе недостаток ?

ну так по большому счету все етль-тулы плюс минус одинаковые
10 окт 18, 10:32    [21700135]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Alexander Ryndin
Member

Откуда:
Сообщений: 4919
Блог
Бумбараш
Yelibay
разработал ХД с нуля для банка с помощью ODI 11 версии. нормально работает.

а в чем в принципе недостаток ?

ну так по большому счету все етль-тулы плюс минус одинаковые
По большому счету все машины одинаковые :)
10 окт 18, 13:20    [21700403]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Ivan Durak
Member

Откуда: Minsk!!!
Сообщений: 3787
Alexander Ryndin
Бумбараш
пропущено...

ну так по большому счету все етль-тулы плюс минус одинаковые
По большому счету все машины одинаковые :)

по большому счету ВСЕ одинаковое
10 окт 18, 14:33    [21700547]     Ответить | Цитировать Сообщить модератору
 Re: ORACLE OLTP Partitioned VS POSTGRESQL Greenplum (Пошла жара ;))  [new]
Бумбараш
Member

Откуда: никем не победимая, самая любимая
Сообщений: 3057
Alexander Ryndin
Бумбараш
Бест практис это не использовать ODI )

Или любую другую ETL-поделку за 100+к усд
А что использовать?

использовать самописный ЕТL. К такому приходят все зрелые хранилища/команды, которые я видел. Основной плюс 1. сильно более быстрая автоматизация типовых задач.

ну и далее 2. более гибкие возможности разработки. 3. не надо платить 100к+ за "рисовалку".

Если хотите что-нибудь хорошее про ODI - как-то увидел на проекте с ODI, что там нельзя было сделать какой-то стандартный граф потоков загрузки - типо сначала параллельно загрузки, потом последовательно, потом параллельно. Или типа того. Пришел в другой банк - там тоже самое. Для обхода лепиться какая-то костылина.
С учетом того, что любой подкованный етльщик напишет на скриптах обертку реализующую такой кейс за мало человекодней/часов - возникает недоумение - за что платиться такое бабло.
10 окт 18, 14:43    [21700566]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
Все форумы / Сравнение СУБД Ответить