Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / MySQL Новый топик    Ответить
 xml to db  [new]
Музаффар
Member

Откуда: UZB
Сообщений: 767
здравствуйте всем!

ребята что можете сказать на счет load xml infile?
З.Ы. у меня хмл файл весит 2,5Гига

или вообще работать через парсеры к примеру StAX на JAVA?
5 окт 17, 17:56    [20846186]     Ответить | Цитировать Сообщить модератору
 Re: xml to db  [new]
javajdbc
Member

Откуда: Montreal
Сообщений: 17139
Музаффар
здравствуйте всем!

ребята что можете сказать на счет load xml infile?
З.Ы. у меня хмл файл весит 2,5Гига

или вообще работать через парсеры к примеру StAX на JAVA?


1. из обших соображений (для стабильности)
я бы перевел XML в CSV и разбил бы на 10 частей

2. вот парочка статей на тему.
Там полно практических выводов, типа
поднять размер одного из буферов, использовать ИСАМ, итд

http://dbahire.com/testing-the-fastest-way-to-import-a-table-into-mysql-and-some-interesting-5-7-performance-results/

(мужик грузил 3Г файл по полтора-2 часа кучей разных способов...
нехило так работу сделал...)

https://www.morpheusdata.com/blog/2014-12-21-the-fastest-way-to-import-text-xml-and-csv-files-into-mysql-tables
5 окт 17, 18:40    [20846284]     Ответить | Цитировать Сообщить модератору
 Re: xml to db  [new]
Akina
Member

Откуда: Зеленоград, Москва, Россия
Сообщений: 15944
Импорт БД ФИАС в MySQL. Практический опыт.
Реальный импорт XML в 2-2,5 гектара не вызывал проблем.
5 окт 17, 20:42    [20846479]     Ответить | Цитировать Сообщить модератору
Все форумы / MySQL Ответить