Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Проектирование БД Новый топик    Ответить
 Обработка CSV файла  [new]
Anton42
Member

Откуда:
Сообщений: 1
Доброго времени суток! Есть csv файл. 600-700 тысяч записей на 16 полей. Господа, нужно решение по обработке информации. Excel не справляется с математикой. Главное - применение разных "серверов" не приветствуется (обработка будет проходить на случайных компах). Предложите, какими воспользоваться приложениями, создать прогу преобразующую файл в базу и формирующую кучу отчётов.
7 окт 18, 17:53    [21697415]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
miksoft
Member

Откуда:
Сообщений: 37672
Anton42
Excel не справляется с математикой.
даже VBA ?
7 окт 18, 19:46    [21697448]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Dimitry Sibiryakov
Member

Откуда:
Сообщений: 48131

Anton42
Главное - применение разных "серверов" не приветствуется (обработка будет проходить на
случайных компах). Предложите, какими воспользоваться приложениями, создать прогу
преобразующую файл в базу и формирующую кучу отчётов.

Лучше всего сделать веб-сервис, который принимает файл и выдаёт результат. Этим сразу
снимается и ограничение на "применение разных серверов" и повышается удобство деплоя.

Posted via ActualForum NNTP Server 1.5

7 окт 18, 20:01    [21697455]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
PizzaPizza
Member

Откуда:
Сообщений: 280
Anton42
какими воспользоваться приложениями, создать прогу преобразующую файл в базу и формирующую кучу отчётов.

Из одного файла один раз все нужные отчёты вам нужно получать или много раз надо эти отчёты формировать с разными параметрами в разное время?
7 окт 18, 21:18    [21697516]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
982183
Member

Откуда: VL
Сообщений: 3104
Anton42
Excel не справляется с математикой.

Не умеет считать нужного или долго считает?
8 окт 18, 02:26    [21697632]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
L_argo
Member

Откуда:
Сообщений: 889
Anton42
Предложите, какими воспользоваться приложениями, создать прогу преобразующую файл в базу и формирующую кучу отчётов.
Воспользуйтесь услугами программиста. :)
8 окт 18, 09:42    [21697722]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
iiyama
Member

Откуда:
Сообщений: 601
Anton42,

как вариант или что-то подобное
8 окт 18, 14:24    [21698123]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Ы2
Member

Откуда:
Сообщений: 168
Anton42
Главное - применение разных "серверов" не приветствуется (обработка будет проходить на случайных компах). Предложите, какими воспользоваться приложениями, создать прогу преобразующую файл в базу и формирующую кучу отчётов.

Не очень понятно, что значит «преобразующую файл в базу». В зависимости от желаемого, можно попробовать начать с awk, perl, python, R… тысячи их. И, таки, да, веб-сервис решит проблемы обработки «на случайных компах».
8 окт 18, 15:04    [21698197]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Hawkmoon
Member

Откуда:
Сообщений: 713
Судя по постановке и компьютерной грамотности, дальше MS Access посылать человека бесполезно.

И то сомнительно - т.к. таки SQL придется писать самому...
8 окт 18, 16:14    [21698303]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
L_argo
Member

Откуда:
Сообщений: 889
iiyama
Anton42,
как вариант или что-то подобное
На случ. компе так просто не запустишь.
8 окт 18, 17:34    [21698438]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Котовасия
Member

Откуда:
Сообщений: 1185
Anton42,

встроенный в винду движок jet мгновенно засасывает csv файлик в (например) акцессовскую табличку, например: 19170656, а дельше - что хочешь крути.
Только через клиента данные при конвертации гонять не следует (см. ссылку).
8 окт 18, 18:18    [21698490]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
YUBA
Member

Откуда:
Сообщений: 698
Anton42,
SQLite.
13 окт 18, 14:58    [21703300]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
YUBA
Member

Откуда:
Сообщений: 698
Anton42, :Женитьба Excel и SQLite [url=]https://www.sql.ru/forum/1199051/zhenitba-excel-i-sqlite[/url]
13 окт 18, 15:00    [21703302]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
YUBA
Member

Откуда:
Сообщений: 698
YUBA
Anton42, :Женитьба Excel и SQLite [url=]https://www.sql.ru/forum/1199051/zhenitba-excel-i-sqlite[/url]
Приношу извинения, в указанной теме вопрос остался не решен. Но если ADODB есть, то не вижу проблем с возможностью такого подключения.
13 окт 18, 15:14    [21703306]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
DaniilSeryi
Member

Откуда:
Сообщений: 1410
Anton42
Доброго времени суток! Есть csv файл. 600-700 тысяч записей на 16 полей. Господа, нужно решение по обработке информации. Excel не справляется с математикой. Главное - применение разных "серверов" не приветствуется (обработка будет проходить на случайных компах). Предложите, какими воспользоваться приложениями, создать прогу преобразующую файл в базу и формирующую кучу отчётов.


VBA и SQL-запросы к листам Excel в VBA.
15 окт 18, 18:47    [21704443]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Сруль.
Member

Откуда:
Сообщений: 112
Можно, конечно, пройти мимо Вашего вопроса,
чтобы ответом не привлечь троллей.
Но осмелюсь с правом совещательного голоса...
PowerBuilder. Этот продукт был в своё время раздавлен
двумя танковыми гусенницами.
Первая-Майкрософт, вторая-бездарный маркетинг его собственных хозяев.
Всем требованиям вашей постановки он удовлетваряет.
У него есть инструментарий, превращающий текстовый файл в таблицу(возможно, вы это имели ввиду, говоря о базе данных ) .
У него мощная база для составления отчётов.
Он умеет стрелять с первой встречной машины.
Но, т.к. продукт крепко забыт, особенно молодёжью,
лучше подыскать спеца. Можно снять демо-версию на месяц.
6 мар 19, 11:35    [21826042]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
L_argo
Member

Откуда:
Сообщений: 889
Кстати QlikView предлагали ? Вполне бы подошло. :)
Правда на "случайных компах" придется поставить десктоп-версию.
Зато отчетность будет шикарной.
6 мар 19, 11:51    [21826069]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Озверин
Member

Откуда: Ростов-на-Дону
Сообщений: 5183
что это делает в проектировании?
6 мар 19, 13:16    [21826187]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
mayton
Member

Откуда: loopback
Сообщений: 41808
Anton42
Доброго времени суток! Есть csv файл. 600-700 тысяч записей на 16 полей. Господа, нужно решение по обработке информации. Excel не справляется с математикой. Главное - применение разных "серверов" не приветствуется (обработка будет проходить на случайных компах). Предложите, какими воспользоваться приложениями, создать прогу преобразующую файл в базу и формирующую кучу отчётов.

По проишествии пол-года. С удивлением прочитал посты. Не увидел собственно задания и не увидел проблемы.

Я хочу спросить автора об актуальности вопроса.

Убежден что автору стоило просто поднять вопрос в Программировании. Быстро-бы накидали решений и даже с исходниками.
10 мар 19, 16:20    [21828717]     Ответить | Цитировать Сообщить модератору
 Re: Обработка CSV файла  [new]
Serguei
Member

Откуда: Papua New Guinea
Сообщений: 680
mayton
Убежден что автору стоило просто поднять вопрос в Программировании. Быстро-бы накидали решений и даже с исходниками.


Нету тут автора - курсовик горел, вот и в панике вопрос написал и забыл. Но самое печально что тут админов похоже тоже нету. Я два раза писал им, чтобы в программирование перенесли- эффект 0.
10 мар 19, 17:11    [21828731]     Ответить | Цитировать Сообщить модератору
Все форумы / Проектирование БД Ответить