Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / OLAP и DWH Новый топик    Ответить
 удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
как можно удалить часть данных из куба.
суть проблемы проста:
данные ежедневно добавляются в куб, раз в неделю специальный чел контролирует правильность загрузки. Иногда, происходит сбой заливки данных. надо вырезать данные за промежуток времени и залить заново.

прошу прощение, но я еще пока чайник в кубах
15 авг 18, 08:39    [21642540]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
StarikNavy
Member

Откуда: Москва
Сообщений: 1924
Mihich,

1) настроить вьюшку (добавить условие) удалить из базы данные
2) пересчитать куб (партицию)
15 авг 18, 12:29    [21642843]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
Так для этого нужно чтоб были все данные в БД для обработки куба ((( А у меня только в БД только оперативные (за сутки) (((
15 авг 18, 13:28    [21642975]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
я могу найти данные еще за неделю, а вот за годы это уже проблема (((
15 авг 18, 13:29    [21642981]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Ferdipux
Member

Откуда: Москва
Сообщений: 458
Mihich
я могу найти данные еще за неделю, а вот за годы это уже проблема (((


Тогда пилите DWH, где будете хранить данные для скармливания кубу.
Теоретически можно в кубе сделать партиции по дням и заливать данные в партицию, но не советую.
Вам неоткуда будет взять данные если вы решите изменить формулы расчета. И куб SSAS тормозит при процессинге если партиций в нем много.
15 авг 18, 18:38    [21643531]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Den Limonov
Member

Откуда:
Сообщений: 20
А разве нельзя сделать копию процесса загрузки и скормить ему нужную дату вместо SYSDATE или LOAD_DATE?
16 авг 18, 07:35    [21643916]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
кубы делал не я. я их сейчас поддерживаю. поэтому и возникла проблема ( идея) из куба вырезать нужное окно данных, а потом заливать в это окно. чтоб не было задвоения данных. Но чувствую придется искать в данных дыры и заливать именно тот кусок которого не хватает((
17 авг 18, 09:17    [21645387]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
Ferdipux, прошу прощение, а DWH это что?
17 авг 18, 09:18    [21645389]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
Den Limonov
А разве нельзя сделать копию процесса загрузки и скормить ему нужную дату вместо SYSDATE или LOAD_DATE?


да так и делаю. но геморойно каждый раз вручную искать окна (((
17 авг 18, 09:20    [21645394]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
протормозил ))))
17 авг 18, 09:51    [21645433]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
StarikNavy
Member

Откуда: Москва
Сообщений: 1924
Mihich,

ели вы каждый день генерите новую партицию, и в нее пишети свежие данные, то соответсвенно нужно удалить партицию за нужный день.

а сколько сейчас партиций у кубе (ради интереса)?
данные для измерений как меняются?
17 авг 18, 12:07    [21645776]     Ответить | Цитировать Сообщить модератору
 Re: удаление части данных из куба  [new]
Mihich
Member

Откуда:
Сообщений: 44
StarikNavy
Mihich,

ели вы каждый день генерите новую партицию, и в нее пишети свежие данные, то соответсвенно нужно удалить партицию за нужный день.

а сколько сейчас партиций у кубе (ради интереса)?
данные для измерений как меняются?


как посмотреть сколько партиций?
данные для измерений берутся с датчиков. делается дополнительная обработка измерений.

ЗЫ: я пока в этом чайник
17 авг 18, 12:52    [21645855]     Ответить | Цитировать Сообщить модератору
Все форумы / OLAP и DWH Ответить