Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Microsoft SQL Server Новый топик    Ответить
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
 Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
SQL 2005 Standard Edition (64-bit) , 200 гиговая база разворачивается примерно за 5 часов, и это без процессинга транзакшн логов.
Это нормально? Можно ли как-нибудь ускорить процесс?
18 янв 11, 13:32    [10090429]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
iljy
Member

Откуда:
Сообщений: 8711
Sad_But_False,

филосовский вопрос. А сколько времени по-вашему нужно, чтобы записать на диск 200 гигов?
18 янв 11, 13:36    [10090470]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
iljy
Sad_But_False,

филосовский вопрос. А сколько времени по-вашему нужно, чтобы записать на диск 200 гигов?

ну уж явно не 5 часов
18 янв 11, 13:40    [10090517]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31964
Sad_But_False
SQL 2005 Standard Edition (64-bit) , 200 гиговая база разворачивается примерно за 5 часов, и это без процессинга транзакшн логов.
Это нормально? Можно ли как-нибудь ускорить процесс?
У вас скорость восстановления 10 мб/сек, в принципе маловато. Наверное диски медленные , обычно только от этого зависит.

Какая дисковая подсистема, где расположены файлы данных и бакапа...

Померяйте лиски тестом SQLIO.
18 янв 11, 13:40    [10090519]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Гавриленко Сергей Алексеевич
Member

Откуда:
Сообщений: 37254
Sad_But_False
iljy
Sad_But_False,

филосовский вопрос. А сколько времени по-вашему нужно, чтобы записать на диск 200 гигов?

ну уж явно не 5 часов
Инфа 100%?
18 янв 11, 13:40    [10090526]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Glory
Member

Откуда:
Сообщений: 104751
Sad_But_False
iljy
Sad_But_False,

филосовский вопрос. А сколько времени по-вашему нужно, чтобы записать на диск 200 гигов?

ну уж явно не 5 часов

Как вы высчитали, что не 5 часов ?
Вы меряли скрость ваших дисков ?
18 янв 11, 13:41    [10090535]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31964
iljy
Sad_But_False,

филосовский вопрос. А сколько времени по-вашему нужно, чтобы записать на диск 200 гигов?
На обычный одиночный бытовой диск - полчаса.
18 янв 11, 13:41    [10090543]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Crimean
Member

Откуда:
Сообщений: 13147
ускорить можно
использовать сжатие бакапов типа лайтспида
бакапить / ресторить в несколько потоков/файлов, использовать для них несколько разных устройств
данные распределить по файлгруппам, файлгруппы - по разным устройствам
распаралеливание дает приличный выигрыш, пока не упремся в дисковую подсистему
сжатие - аналогично, за счет перекидывания части работ с диска на проц, который на бакапах все равно простаивает
кстати, а памяти - то хватает? и ресторитесь случаем не с внешнего USB диска?
18 янв 11, 13:41    [10090545]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
iljy
Member

Откуда:
Сообщений: 8711
alexeyvg
iljy
Sad_But_False,

филосовский вопрос. А сколько времени по-вашему нужно, чтобы записать на диск 200 гигов?
На обычный одиночный бытовой диск - полчаса.

А на битый рейд 5? А с сетевого бакапа? А на нагруженном сервере? Не надо утрировать, я всего лишь намекал, что информации не достаточно.
18 янв 11, 13:44    [10090570]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
Гавриленко Сергей Алексеевич
Sad_But_False
пропущено...

ну уж явно не 5 часов
Инфа 100%?

простое копирование - около часа, на тот же сервак, с сетки, на тот же рэйд.
база не боевая, всё лежит на одном рэйде.
2Glory:
Никак не мерял, узнал путём разворачивания как минимум 3х бэкапов.
18 янв 11, 13:44    [10090571]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Glory
Member

Откуда:
Сообщений: 104751
Sad_But_False
2Glory:
Никак не мерял, узнал путём разворачивания как минимум 3х бэкапов.

Т.е. 3 бэкапа по 200гб восстанавливались за 15минут, а 4ый - за 5 часов ?
18 янв 11, 13:45    [10090575]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
Crimean
ускорить можно
использовать сжатие бакапов типа лайтспида
бакапить / ресторить в несколько потоков/файлов, использовать для них несколько разных устройств
данные распределить по файлгруппам, файлгруппы - по разным устройствам
распаралеливание дает приличный выигрыш, пока не упремся в дисковую подсистему
сжатие - аналогично, за счет перекидывания части работ с диска на проц, который на бакапах все равно простаивает
кстати, а памяти - то хватает? и ресторитесь случаем не с внешнего USB диска?

ресторил ис сетки и с локального диска - по времени однои тоже.
сервер не нагружен.
18 янв 11, 13:45    [10090581]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
Glory
Sad_But_False
2Glory:
Никак не мерял, узнал путём разворачивания как минимум 3х бэкапов.

Т.е. 3 бэкапа по 200гб восстанавливались за 15минут, а 4ый - за 5 часов ?

нет, все восстанавливались по 5 часов.
18 янв 11, 13:46    [10090588]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Glory
Member

Откуда:
Сообщений: 104751
Sad_But_False
Glory
пропущено...

Т.е. 3 бэкапа по 200гб восстанавливались за 15минут, а 4ый - за 5 часов ?

нет, все восстанавливались по 5 часов.

Ну так откуда вы знаете, что это не есть ограничение вашей дисковой системы ?
18 янв 11, 13:48    [10090622]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Alx65
Member

Откуда: МО
Сообщений: 402
Какой у Вас размер журнала и стоит ли быстрая инициализация файлов?

Первый этап восстановления это создание и инициализация фйлов базы и журнала. Если размер файла журнала был большой (не зависимо ит его заполнения), то на это может уйти масса времени. Если не включена быстрая инициализация файлов, то и на инициализацию файлов данных может тоже уходить приличное время.
18 янв 11, 13:50    [10090642]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31964
iljy
alexeyvg
На обычный одиночный бытовой диск - полчаса.

А на битый рейд 5? А с сетевого бакапа? А на нагруженном сервере? Не надо утрировать, я всего лишь намекал, что информации не достаточно.
Да я понимаю, я же сразу спросил у ТС "Какая дисковая подсистема, где расположены файлы данных и бакапа"

Просто я считаю, что скорость восстановления 10 мб/с - это как то неправильно для сервера вообще и для базы 200 гб в частности, поэтому нужно что-то поправить в железе или софте.

Хотя конечно если всё устраивает, типа за ночь бакапы восстанавливаются на дев-серверах...

Sad_But_False
ресторил ис сетки и с локального диска - по времени однои тоже.
сервер не нагружен.
неконкретно как-то.
18 янв 11, 13:50    [10090644]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
Glory
Sad_But_False
пропущено...

нет, все восстанавливались по 5 часов.

Ну так откуда вы знаете, что это не есть ограничение вашей дисковой системы ?

Я этого не говорил.
Просто по наблюдениям в процессе рестора, ни память ни процы не нагружаются особо, да и не особо тоже.
учитывая что простая запись такого объёма файлов, занимает гораздо меньше времени, у меня и возник вопрос который я задал.
18 янв 11, 13:51    [10090653]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Glory
Member

Откуда:
Сообщений: 104751
Sad_But_False
Glory
пропущено...

Ну так откуда вы знаете, что это не есть ограничение вашей дисковой системы ?

Я этого не говорил.
Просто по наблюдениям в процессе рестора, ни память ни процы не нагружаются особо, да и не особо тоже.
учитывая что простая запись такого объёма файлов, занимает гораздо меньше времени, у меня и возник вопрос который я задал.

Зачем для работы с диском нужно нагружать процессор или память ?
Что такого они должны делать при разметке новых файлов базы ?
18 янв 11, 13:53    [10090669]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Кудряшка
Member

Откуда: Сидней
Сообщений: 2219
Alx65
Какой у Вас размер журнала и стоит ли быстрая инициализация файлов?

Первый этап восстановления это создание и инициализация фйлов базы и журнала. Если размер файла журнала был большой (не зависимо ит его заполнения), то на это может уйти масса времени. Если не включена быстрая инициализация файлов, то и на инициализацию файлов данных может тоже уходить приличное время.


Во-первых, +1 к этому ссобщению.

Во вторых, ТС, нагрузку на диски в процессе восстановления Вы можете посмотреть-то?
18 янв 11, 13:58    [10090725]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
Glory
Sad_But_False
пропущено...

Я этого не говорил.
Просто по наблюдениям в процессе рестора, ни память ни процы не нагружаются особо, да и не особо тоже.
учитывая что простая запись такого объёма файлов, занимает гораздо меньше времени, у меня и возник вопрос который я задал.

Зачем для работы с диском нужно нагружать процессор или память ?
Что такого они должны делать при разметке новых файлов базы ?

зачем выдёргивать слова из контекста?
18 янв 11, 13:59    [10090732]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Glory
Member

Откуда:
Сообщений: 104751
Sad_But_False
Glory
пропущено...

Зачем для работы с диском нужно нагружать процессор или память ?
Что такого они должны делать при разметке новых файлов базы ?

зачем выдёргивать слова из контекста?

Из какого контекста ?
Я спросил - как вы измеряли производительность дисковой системы
Вы начали рассказывать про мониторинг процессора и памяти
Процитировал я вас полностью
18 янв 11, 14:10    [10090803]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Sad_But_False
Member

Откуда: от вирблюда
Сообщений: 22273
Glory
Sad_But_False
пропущено...

зачем выдёргивать слова из контекста?

Из какого контекста ?
Я спросил - как вы измеряли производительность дисковой системы
Вы начали рассказывать про мониторинг процессора и памяти
Процитировал я вас полностью


была написана и эта фраза:
"учитывая что простая запись такого объёма файлов, занимает гораздо меньше времени, у меня и возник вопрос который я задал."
сейчас посмотрел Avg. Disk Queue Lenght ~ 4,800
при этом %Idle Time ~ 0,300
Рахмер файлов логов действительно большой, хотя они и пустые на 90%
18 янв 11, 14:19    [10090887]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31964
Sad_But_False
сейчас посмотрел Avg. Disk Queue Lenght ~ 4,800
при этом %Idle Time ~ 0,300
Рахмер файлов логов действительно большой, хотя они и пустые на 90%
1. Проследите процесс восстановления. Логи восстанавливаются в конце, если дело в этом, то у вас за час восстановится бакап (прогресс дойдёт до 100%), а потом 4 часа будут восстановление по логам.
2. Откуда и куда идёт восстановление?
3. Какая скорость на дисках, меняется ли она или постоянна?
4. Какая скорость по файлам, в какие периоды восстановления?
5. На чём лежат файлы данных, нет ли деградации рейда?
6. Насколько большой лог, намного больше файлов данных?
18 янв 11, 14:27    [10090950]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
Glory
Member

Откуда:
Сообщений: 104751
Sad_But_False
Рахмер файлов логов действительно большой, хотя они и пустые на 90%

До собственно восстановления все файлы должны быть созданы и размечены на страницы
Независимо от того, будут потом эти страницы заполнены данными или останутс пустыми
18 янв 11, 14:32    [10090981]     Ответить | Цитировать Сообщить модератору
 Re: Долго разворачивается бэкап.  [new]
gds
Member

Откуда: Железнодорожный
Сообщений: 1842
Блог
Sad_But_False
SQL 2005 Standard Edition (64-bit) , 200 гиговая база разворачивается примерно за 5 часов, и это без процессинга транзакшн логов.
Это нормально? Можно ли как-нибудь ускорить процесс?

Какой рейд на дисках с данными и файлом t-log? Какова модель восстановления? Скоростя мерили на READ/WRITE?
У меня на диск с 168/60 Mb/s (read/write) бекап 234 Гига восстанавливается ~54 мин. А на диск с 256/160 Mb/s (read/write) бекап 234 Гига восстанавливается ~27 мин.
18 янв 11, 17:03    [10092303]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
Все форумы / Microsoft SQL Server Ответить