Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Microsoft SQL Server Новый топик    Ответить
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
 проблема с большим backup-ом  [new]
?
Guest
Доброе время суток!

Не сталкивался ли кто с проблемой копирования файлов большого размера по сети?
Ошибки при копировании не дают мне перебросить backup размером 600Гб с одного сервера на другой. Старый backup в 50Гб копируется без проблем.
19 янв 09, 19:49    [6707140]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
locky
Member

Откуда: Харьков, Украина
Сообщений: 62034
Зал замер в ожидании полного текста сообщения об ошибке.
И кода ошибки тоже.

-------------------------
There’s no silver bullet!
19 янв 09, 19:52    [6707144]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Taffy
Member

Откуда:
Сообщений: 20501
и что - за сутки прирост в 550 ГБ?
или вы делаете бакап раз в год?
что-то тут не так
19 янв 09, 19:58    [6707161]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
?
Guest
просто старый бекап - это к тому, что проблема при копировании именно больших файлов.
Грешить здесь можно на многое - на ОС, железо и пр. Вопрос, конечно, очень общий.
19 янв 09, 20:04    [6707171]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Mr Marmelad
Member [заблокирован]

Откуда: Boston MA
Сообщений: 2957
?,

Традиционно зипаем бякапу - обычно 1/5 формата пересылаем через нетворк. Aнзипаем - рестораем. Мучительно но что делать... Как альтернатива - LightSpeed - пятый (5.2) просто прелесть.
19 янв 09, 20:11    [6707186]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
?
Guest
для архивирования мало места
а что такое LightSpeed - пятый? ссылкой не поделитесь?
19 янв 09, 20:19    [6707203]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Mr Marmelad
Member [заблокирован]

Откуда: Boston MA
Сообщений: 2957
это просто: LiteSpeed For SQL Server -
19 янв 09, 20:45    [6707273]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31444
Mr Marmelad
?,

Традиционно зипаем бякапу - обычно 1/5 формата пересылаем через нетворк. Aнзипаем - рестораем. Мучительно но что делать... Как альтернатива - LightSpeed - пятый (5.2) просто прелесть.
Как альтернатива LightSpeed - пятый (5.2) юзаем MSSQL 2008
:-)
19 янв 09, 21:32    [6707388]     Ответить | Цитировать Сообщить модератору
Между сообщениями интервал более 1 года.
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Подскажите! у кого есть опыт

Нужно скопировать дамп размером более 2 терабайт
обычным способом копирование не идет.



for google теги:

скопировать огромный файл
скопировать 2TB
как скопировать большие файлы
копирование больших файлов
14 фев 12, 08:42    [12086236]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
aleks2
Guest
Yura_Z
обычным способом копирование не идет.

Огласите ваш "обычный" способ.
И чем он аргументирует отказ тож процитируйте.
14 фев 12, 08:59    [12086288]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
aleks2,

есть дамп 2 тб

задача скопировать его на большой скорости

Вообще xcopy копирует но жутко медленно!
Стартует потом скорость жутко падает до 20мб/сек и даже ниже
в результате копия льется около суток

по временным характеристикам это не устраивает
---
задача скопировать хотя бы на скорости 80-90мб
14 фев 12, 09:11    [12086316]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Shakill
Member

Откуда: мск
Сообщений: 1880
Yura_Z, перед копированием можно файл порезать на части каким-нибудь архиватором или сплиттером, а потом слить в один уже на той стороне

но вообще это вопрос для другого форума
14 фев 12, 09:21    [12086347]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Shakill,

В теории может быть !


архивация бекапа идет более суток! не устраивает
Если резать, боюсь архиватор это будет делать еще дольше ...

большая часть обычных утилит вообще не могут такие объемы обработать
например тотал коммандер просто не копирует такие файлы
14 фев 12, 09:37    [12086401]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Shakill
но вообще это вопрос для другого форума


я написал сюда в надежде на то,
что тут практики, которые работают с большими базами
проблема касается больших баз данных

на других формах обсуждают большие файлы как 10 16 мегабайт, а для баз данных это детские размеры.
потому думаю что пишу как раз в тему форума!
14 фев 12, 09:41    [12086417]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Glory
Member

Откуда:
Сообщений: 104760
Yura_Z
проблема касается больших баз данных

синтаксис команды backup позволяет разбивать создаваемый бэкап на 64 устройства.

кроме того, есть решения 3их фирм, которые через своих агентов делают бэкапы сразу на удаленные устройства
14 фев 12, 09:49    [12086464]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
invm
Member

Откуда: Москва
Сообщений: 9406
С помощью RichCopy можно копировать в несколько потоков.
14 фев 12, 09:53    [12086495]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Yura_Z
Shakill
но вообще это вопрос для другого форума


я написал сюда в надежде на то,
что тут практики, которые работают с большими базами
проблема касается больших баз данных

на других формах обсуждают большие файлы как 10 16 мегабайт, а для баз данных это детские размеры.
потому думаю что пишу как раз в тему форума!


извиняюсь! ошибся
поправка 10-16 гиг , ... а не мег

( 10-15 гиг для базы это не много ) и с таким объемом файлы копируются без проблем!


повторюсь!

проблема с быстрым копированием файла размером более 2 тб
20мб/с не устраивает!
14 фев 12, 10:00    [12086542]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
invm
С помощью RichCopy можно копировать в несколько потоков.


Спасибо

в практике использовали ?

копировали нормально многотерабайтные файлы ?
14 фев 12, 10:10    [12086609]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Glory
Yura_Z
проблема касается больших баз данных

синтаксис команды backup позволяет разбивать создаваемый бэкап на 64 устройства.

кроме того, есть решения 3их фирм, которые через своих агентов делают бэкапы сразу на удаленные устройства


да это известно!
--

Скорость выше чем 20-50мб/сек ?
боюсь у этих решений критерием является не скорость копирования файла
14 фев 12, 10:12    [12086633]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
invm
Member

Откуда: Москва
Сообщений: 9406
Yura_Z
в практике использовали ?
Не доводилось.
14 фев 12, 10:19    [12086675]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Glory
Yura_Z
проблема касается больших баз данных

синтаксис команды backup позволяет разбивать создаваемый бэкап на 64 устройства.

кроме того, есть решения 3их фирм, которые через своих агентов делают бэкапы сразу на удаленные устройства


опс! а это интересно!
а можно практический пример ?

возникла мысль разбить бекап на 6-12 устройств
но устройством должен быть быть дис ( не ленты )
идея сделать так что бы на один диск залилось как на 12 устройств 12 файлов
можно ли так устроить?
14 фев 12, 10:30    [12086751]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31444
Yura_Z
архивация бекапа идет более суток! не устраивает
Если резать, боюсь архиватор это будет делать еще дольше ...
Сиквел то какой? Может, сразу делать сжатый бакап? Он и делаться будет быстрее.

Если нельзя, то действительно, как минимум можно разбивать бакап на несколько файлов сразу при бакапе (которые потом можно копировать паралельно) и/или использовать утилиты копирования (сам их не использовал, не подскажу).
14 фев 12, 10:32    [12086766]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
Glory
Yura_Z
проблема касается больших баз данных

синтаксис команды backup позволяет разбивать создаваемый бэкап на 64 устройства.



Спасибо огоромное! помогли!
все получилось!

Экспериментально с небольшой базой 300 гиг
создал 3 устройства
и вылил бекап! получился дамп разрезанный на 3 части части!
по крайне мере избавился от больших файлов
14 фев 12, 10:51    [12086876]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
aleks2
Guest
Yura_Z
Скорость выше чем 20-50мб/сек ?


1. Если ваша сеть или диск не могет копировать быстрее - никакая шинковка не поможет.
2. Если ваша сеть или диск могет копировать быстрее - зачем шинковать?

ЗЫ. Проанализировал ли ты, страдалец, что является узким местом?
14 фев 12, 10:53    [12086897]     Ответить | Цитировать Сообщить модератору
 Re: проблема с большим backup-ом  [new]
Yura_Z
Member

Откуда:
Сообщений: 85
aleks2
Yura_Z
Скорость выше чем 20-50мб/сек ?

...
ЗЫ. Проанализировал ли ты, страдалец, что является узким местом?


спасибо за сочувствие! , мир не без добрых людей

да проблема известна и уже решается
в любом случае возиться c разрезанным дампом удобней с одним огромным
еще Римляне говорили разделяй и властвуй!
14 фев 12, 11:48    [12087303]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: [1] 2   вперед  Ctrl      все
Все форумы / Microsoft SQL Server Ответить