Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Microsoft SQL Server Новый топик    Ответить
 вопрос по организации polybase на ms sql server  [new]
Michail A.
Member

Откуда:
Сообщений: 91
Добрый день!

Подскажите, пож-та, кто-нибудь реально сталкивался с организацией polybase для доступ к hadoop?

Хотелось бы практические рекомендации с чего начать и на что обратить внимание.
5 сен 19, 18:15    [21964858]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
vikkiv
Member

Откуда: London
Сообщений: 2498
Michail A.,

я настраивал (когда 2016й выпустили), чисто по инструкции,
java установил по горячке самой последней версии ..
пришлось переставлять потом на те которые он поддерживает.
ну и порты там конечно, учётки с правами и пр.
сервис в нужной последовательности
(иначе не стартовал, либо в вечном старте висит, или с перезапуском проблемы),

к сторонней HDFS системе подключалось без проблем
остальную функциональность не тестировал
(задача была только чтение обеспечить, для закачки в DWH)

п.с. ставил с нуля на чистую систему - может это спасло от остальных граблей
(коих на тот момент судя по первым отзывам было порядком)
5 сен 19, 18:56    [21964880]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
vikkiv
Member

Откуда: London
Сообщений: 2498
а, ещё пути к Java в environment variable на Windows в ручную писал
5 сен 19, 18:58    [21964883]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Michail A.
Member

Откуда:
Сообщений: 91
vikkiv, спасибо за ответ!

Позвольте, уточняющие вопросы:
1) п.с. ставил с нуля на чистую систему - может это спасло от остальных граблей
(коих на тот момент судя по первым отзывам было порядком)


- на чистую систему, что имеется ввиду?

2) к сторонней HDFS системе подключалось без проблем
остальную функциональность не тестировал
(задача была только чтение обеспечить, для закачки в DWH)


- на стороне hadoop проводили какие либо настройки?
6 сен 19, 09:30    [21965090]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
vikkiv
Member

Откуда: London
Сообщений: 2498
Michail A.
- на чистую систему, что имеется ввиду?

1) отформатировать диск
2) установить операционную систему и драйвера
3) установить обновления на операционную систему
4) установить пререквизиты для SQL Server
5) установить и настроить SQL Server вместе с PolyBase


Michail A.
- на стороне hadoop проводили какие либо настройки?

у нас виртуалка была, туда не лазил, только получил информацию как туда достучаться от админов
6 сен 19, 11:02    [21965172]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Michail A.
Member

Откуда:
Сообщений: 91
Добрый день, коллеги!

Пытаюсь по инструкции
https://docs.microsoft.com/ru-ru/sql/relational-databases/polybase/polybase-configure-hadoop?view=sql-server-2016
создать внешний источник данных с помощью инструкции create external data source, но получаю ошибку:

External table access failed due to internal error: 'Java exception raised on call to HdfsBridge_Connect. Java exception message: failure to login: Error (failure to login) occurred while accessing external file.'

Кто-нибудь сталкивался?
2 окт 19, 13:34    [21984843]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Критик
Member

Откуда: Москва / Калуга
Сообщений: 32459
Блог
Michail A.,

На той стороне гляньте, что туда приходит
2 окт 19, 19:19    [21985347]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Michail A.
Member

Откуда:
Сообщений: 91
Критик, подскажите, пжл, как я могу это проверить?
3 окт 19, 11:57    [21985689]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Критик
Member

Откуда: Москва / Калуга
Сообщений: 32459
Блог
Michail A.,

Это могут проверить те, кто поддерживает hadoop
3 окт 19, 12:50    [21985765]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Michail A.
Member

Откуда:
Сообщений: 91
Критик, типо они в логах где-то могут увидеть данную инфу?
3 окт 19, 14:18    [21985889]     Ответить | Цитировать Сообщить модератору
 Re: вопрос по организации polybase на ms sql server  [new]
Michail A.
Member

Откуда:
Сообщений: 91
up
11 окт 19, 10:27    [21991889]     Ответить | Цитировать Сообщить модератору
Все форумы / Microsoft SQL Server Ответить