Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Java Новый топик    Ответить
Топик располагается на нескольких страницах: Ctrl  назад   1 [2]      все
 Re: Механизм обработки очереди  [new]
PetroNotC Sharp
Member

Откуда:
Сообщений: 2481
yvprod
забыл ник,

я к этому и вел, партиционировать по какому нибудь бизнес-правилу и писать в разные очереди
партицирование у нас для бд вроде. А тут при логировании бд вне задачи вообще. И узкое место чел говорит парсер.
4 ноя 19, 13:04    [22009312]     Ответить | Цитировать Сообщить модератору
 Re: Механизм обработки очереди  [new]
qi_ip
Member

Откуда:
Сообщений: 591
PetroNotC Sharp, mayton , понял, чуть позже выложу более подробное описание
4 ноя 19, 13:05    [22009313]     Ответить | Цитировать Сообщить модератору
 Re: Механизм обработки очереди  [new]
yvprod
Member

Откуда:
Сообщений: 16
PetroNotC Sharp,

я другое партционирование имел ввиду, как предложил:
fixxer
Нужно партиционировать входной поток


т.е. предложение было копнуть бизнес-логику, посмотреть действительно ли все данные нужны в одном потоке, возможно все таки их можно разделить
4 ноя 19, 13:40    [22009331]     Ответить | Цитировать Сообщить модератору
 Re: Механизм обработки очереди  [new]
забыл ник
Member

Откуда:
Сообщений: 3048
PetroNotC Sharp
yvprod
забыл ник,

я к этому и вел, партиционировать по какому нибудь бизнес-правилу и писать в разные очереди
партицирование у нас для бд вроде. А тут при логировании бд вне задачи вообще. И узкое место чел говорит парсер.

Партиционирование БД - это лишь маленькая часть ситуаций, где используется "партиционирование" как стратегия. Это и очереди сообщений а-ля кафка, и бигдата, а-ля спарк и nosql а-ля кассандра.

В данном случае имелось ввиду, что при партиционировании, все сообщения попадающие в один партитишен по-дефолту отсортированы в хронологическом порядке, а вот данные в разных партитишенах независимы и могут спокойно быть обработаны в параллель
4 ноя 19, 13:52    [22009337]     Ответить | Цитировать Сообщить модератору
 Re: Механизм обработки очереди  [new]
asv79
Member

Откуда: Тверь
Сообщений: 2732
положит в стрим ,распаралелить взять обратно ичордером
4 ноя 19, 22:03    [22009553]     Ответить | Цитировать Сообщить модератору
 Re: Механизм обработки очереди  [new]
PetroNotC Sharp
Member

Откуда:
Сообщений: 2481
забыл ник,
Понятно.
По теме, тут можно решать без бд, как java программист.
И можно с бд, как представляется проще бд специалисту - "пришло, и всё сохраняем".
Как их зовут? БД центристы вроде). Там где БД - центр вселенной.
5 ноя 19, 08:30    [22009694]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: Ctrl  назад   1 [2]      все
Все форумы / Java Ответить