Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Работа Новый топик    Ответить
Топик располагается на нескольких страницах: Ctrl  назад   1 [2]      все
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
GuidanceMoralic
Member [скрыт] [заблокирован]

Откуда:
Сообщений: 242
Отмечусь в сабже в списке заинтересованных. Отношусь к категории "кажется, мне это интересно". Понимаю, что много хайпа. Практически с большими данными работал как разработчик высоконагруженного бэкенда одной российской соцсети. Трудно сказать какой компоненты тут больше - "big data" или "low latency". Занимался проектированием нашей собственной распределённой системы, похожей на amazon dynamoDB - такое большое k=v store куда можно серваков добавить и куда кусок данных сам переедет. И похожей системы для одной внутренней системы, где непрерывно льётся много k=v данных и относительно в риалтайме обрабатываются (сотни серверов).

Что касается ML: практически: прямого ML-опыта можно сказать не было, но пару раз "свечку держал" рядом - распознавание речи (реализовывал что-то по статьям, по разработам наших науч. сотрудников, портировал код win->unix, сопутствующие задачи), краулинг интернета (типа давайте нарисуем распределение размеров всех картинок в ЖЖ для прикола), парсинг логов на Hadoop (давно, в 2009, но хадуп в настоящее время вроде как в передовых кругах становится "ненужно"). Теоретически: недавно пытался понять как работает алгоритм back propagation, читал и понимал это http://karpathy.github.io/neuralnets/ . Уже хотел начать реализовывать свою CNN, но пока не добрался - занят распылением себя на другие свои же "интересные" задачи.

Интересно было бы попасть в некое R&D, где приветствуется компетенция на стыке алгоритмов-структур-данных и возможность потрогать настоящий ML, требуется анализ всяких академических статей по алгоритмам и структурам, микс и синтез этих вещей, изобретение своих велосипедов и ваяние рабочих прототипов под конкретные задачи. Желаю участвовать в заложении архитектур систем. Но с матаном тяжелее, ибо что такое производная я понимаю, но никакого физмата за плечами нет и в сравнении с "реальными матанными пацанами" я бесполезен. Из той ссылки А. Карпатого я вроде понял идею потоков градиента, но пока практической реализации не сделаю трудно говорить о реальном понимании)

data.structures@yandex.ru
15 янв 18, 20:30    [21108963]     Ответить | Цитировать Сообщить модератору
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
GuidanceMoralic
Member [скрыт] [заблокирован]

Откуда:
Сообщений: 242
mini.weblab
1) рассматривайте направление Биг даты, как инвестицию, а не как направление, которое уже сегодня приносит деньги
2) нужно было шерстить Германию, США, Великобританию, т.е потенциальных инвесторов, притом не на вакансии, а на то, чем они занимаются, и какие требования выдвигают к специалистам
3) за рубежом направление Биг дата это прежде всего инвестиции и маркетинг,
поэтому если вам больше 25-27 даже не начинайте, ну разве что уж очень сильно хочется
4) ну и еще подумайте о том, кто же эти самые потенциальные заказчики биг-дата изысканий :)

Про 25-27 не сильно понятна логика.
15 янв 18, 20:34    [21108967]     Ответить | Цитировать Сообщить модератору
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
GuidanceMoralic
Member [скрыт] [заблокирован]

Откуда:
Сообщений: 242
NePZ
Если без шуток, то "Искусственный интеллект" действительно очень неудачная калька с английского. Этот термин совершенно неверно понимают

Словом intelligence обычно разведку называют.
А разведка (военная) - она часто на признаках работает.
Какой-то советский полковник ГРУ диссер писал об использовании развед-признаков. У них там признаки в духе "в газетах написали то-то", "активировался такой-то передатчик" и т.п.
Т.е. intelligence -- это как-бы "выявление неявного" (оно же раз-ведывание, "ведать раз" (что такое раз - вопрос отдельный, слышал что это типа "первопричина")).
Так вот, получается AI - правильно переводить как "автоматизированное выявление невидимого" как-бы или в крайнем случае "автоматизированная разведка"?
15 янв 18, 20:41    [21108974]     Ответить | Цитировать Сообщить модератору
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
GuidanceMoralic
Member [скрыт] [заблокирован]

Откуда:
Сообщений: 242
Можно обобщить intelligence как "интеллект" и "intelligence" как разведку.
Обе хрени по-сути занимаются выявлением закономерностей для получения инфы нового качества.
Разведка - анализ всяких фактов и выявление что у врага новая ракета.
Интеллект - анализ всяких всяких фактов и выявление между ними взаимосвязей, например что солнечно с утра к морозу.
15 янв 18, 20:44    [21108979]     Ответить | Цитировать Сообщить модератору
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
sergeyns
Member

Откуда: Москва
Сообщений: 1205
NePZ
JJZ
То, что я вижу в близлежайщих проектах по Big Data в России - это в основном процессинг (а-ля ETL) с использованием инфраструктуры распараллеливания обработки Hadoop, Spark(Scala).
ML и прочих сложных алгоритмов там очень мало или нет вообще.

Так что похоже ML будет не очень востребован в России, будут только инфраструктуру BigData использовать вместо ETL на дорогих решениях Oracle, Informatica. Ну и ценник на спецов по Big Data упадет


"Полезная " BigData, как и ML, реально может быть только там, где есть причесанная Data. Это, например, 2 крупнейшие интернет-компании (поиск, соцсети и почтовые сервисы и т.п.): Яндекс и Mail.ru, несколько дюжин других интернет компаний - от DMP-платформ и всем известной цифровой доски объявлений Avito до пары федеральных работных порталов (HH, SJ) и крупнейших игровых платформ, но там, за редким исключением, часто буквально 1-2 интересные задачи
Добавляем полдюжины платежных систем разных видов, также большую четверку ОСС (в порядке убывания зрелости компетенции: Мегафон, Tele2, Билайн, МТС), крупнейшие и наиболее технологичные универсальные и розничные банки (СБРФ, ТКС, Альфа и т.д. - их даже при нестрогом отборе меньше десятка наберется), специализированные агрегаторы финансовой и подобной информации (от бюро кредитных историй до облачных околофинансовых и околобухгалтерских сервисов), федеральный телеком (Ростелеком и т.п.), пару околонефтяных контор, связанных с геологической разведкой, государство (Спутник, портал гос.услуг, экосистема ФНС, АЦ при Правительстве РФ и т .д. причем реальными делами с внятным финрезом только в ФНС, ИМХО, занимаются), и еще один сильно специальный центр сильно некоммерческого характера, скажем так.
Если говорить про ML, добавляем компании, работающие в области технического зрения, от лицевой биометрии до OCR/ODR, голосовой аналитики всех видов, обработки сигналов и анализа сцен (для роботизированных танков КАМАЗов). От ЦРТ до NTechLab, ABBYY и пары юрморд ИППИ РАН. Добавляем несколько компаний, работающих в области кибербезопасности.
Добавляем метеорологов (которые в России делают странные вещи ИМХО), авиапром (внезапно), энергетику (электрогенерация и т .д., а не нефтянка), ГазМяс с нефтянко, вспоминаем про потуги работать со спутниковыми данными в МЧС и Роскосмосе (которые успешны ровно в той же мере, что и Роскосмос в целом и видны невооруженным взглядом, включая спутники ДЗЗ на нерасчетных орбитах), российский биотех и остатки российской науки (ускорители, телескопия, белковые молекулы и т.п.)

Рынок, я бы сказал, узкий, хотя и денежный, если точно знать, где именно деньги лежатЪ.


Науку зря приплели ))), нет её )), но почему то забыли про ритейл...
Ну и самое главное - в этой стране во многих из выше перечисленных компаниях решения принимаются исходя не из экономической целесобразности, а из политического момента (((
16 янв 18, 00:07    [21109218]     Ответить | Цитировать Сообщить модератору
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
romskom
Member

Откуда:
Сообщений: 87
В Epam есть практика BigData. Они готовы учить 3 месяца, если сдадите экзамены - попадете на проект.
16 янв 18, 14:29    [21110791]     Ответить | Цитировать Сообщить модератору
Между сообщениями интервал более 1 года.
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
Nats33
Member

Откуда:
Сообщений: 3
Здравствуйте! Заинтересовал Ваш профиль. Ищем на позицию Senior Machine Learning Developer с опытом детекцией видеопотоков около 5 лет, возможно Вы рассматриваете предложения на работу, если сейчас это не актуально, то возможно кого-то сможете порекомендовать на данную позицию. Надеюсь на обратную связь, в любом случае, желаю Вам хорошего дня!
28 апр 20, 10:35    [22124021]     Ответить | Цитировать Сообщить модератору
 Re: Ищу работу Machine learning/Big data/Data mining Developer в СПб  [new]
ЛехаПан
Member

Откуда:
Сообщений: 440
Nats33
Здравствуйте! Заинтересовал Ваш профиль. Ищем на позицию Senior Machine Learning Developer с опытом детекцией видеопотоков около 5 лет, возможно Вы рассматриваете предложения на работу, если сейчас это не актуально, то возможно кого-то сможете порекомендовать на данную позицию. Надеюсь на обратную связь, в любом случае, желаю Вам хорошего дня!


Добрый день.
Можно подробности проекта?
Обо мне
очень старая тема, до сих пор в проектах
https://www.sql.ru/forum/1152824/razrabotka-programm-na-osnove-mashinnogo-zreniya-videoanalitika
28 апр 20, 16:52    [22124324]     Ответить | Цитировать Сообщить модератору
Топик располагается на нескольких страницах: Ctrl  назад   1 [2]      все
Все форумы / Работа Ответить