Что стреляет лучше по баблу Spark или ML?

[XpoH]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

РСУ маловато будет, а так как везде
А что за профиль?

[Big Cheese]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

РСУ маловато будет

Ну, с этим тяжело не согласиться!

А что за профиль?

профили разные - от С++ бекэнда до JavaScript UI/UX.

[АццкоМото]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.

[XpoH]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.

так про базу никто ничего не писал, база как база, как у всех, короче, но нынче РСУ все очень щедро насыпают.
как по опыту последних 2 лет, я бы брал бОльшую часть РСУ а не базой, а что будет дальше - поживем увидим

[АццкоМото]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.

так про базу никто ничего не писал, база как база, как у всех, короче, но нынче РСУ все очень щедро насыпают.
как по опыту последних 2 лет, я бы брал бОльшую часть РСУ а не базой, а что будет дальше - поживем увидим

а я бы брал бОльшую часть именно кэшэм, по крайней мере когда речь именно о таких порядках тотал комп.

ну а главное, не могу понять вашего подхода "про базу никто ничего не писал, речь про РСУ". скажите по-чесноку. утрированная ситуация. база 500к, РСУ - 5к (или, без утрирования, но держа тотал комп фиксированным - 270-290 база, 10 РСУ), вы тоже будете обсуждать, что везде РСУ больше наливают? я лично встану в очередь

[XpoH]

Вот сверху есть цифры, моя ремарка была что РСУ маловато и автор согласился.
Если дают 500 базы и 5 рсу надо брать, конечно, по второму примеру тоже надо брать если дают. Это если по-честноку.

[Big Cheese]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

При прочих равных бОльшая база, это, конечно, плюс. Просто раньше водка была вкуснее база была ниже, но РСУ наливали значительно щедрее, и тотал комп выглядел, условно говоря, 170 база + 180 РСУ.

[Big Cheese]

Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.

У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash.

Тупая работа - это очень напряжно, конечно. Надо менять. А насчет перспективности для развития - может, мне не везло всю дорогу, но вот попасть в такое место, чтобы было перспективно мне как-то не удавалось. Проблема курицы и яйца, наверно. По-этому в основном приходилось/приходится что-то мутить на стороне, или в свободное от работы время на работе. Потом уже попадаешь в место, которое было бы перспективным 2-3 года назад, а сейчас - ну, нормально, но ничего особо нового. Ну и звезд с неба я не хватаю.

[voyager3]

Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.

У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash.

Тупая работа - это очень напряжно, конечно. Надо менять. А насчет перспективности для развития - может, мне не везло всю дорогу, но вот попасть в такое место, чтобы было перспективно мне как-то не удавалось. Проблема курицы и яйца, наверно. По-этому в основном приходилось/приходится что-то мутить на стороне, или в свободное от работы время на работе. Потом уже попадаешь в место, которое было бы перспективным 2-3 года назад, а сейчас - ну, нормально, но ничего особо нового. Ну и звезд с неба я не хватаю.

Эх, всегда вспоминается миниатюра "95 квартала" про чувака, который не мог в 90е купить видеомагнитофон VHS, потом долго и много работал, поднялся и купил, наконец-то. В 2010м.

[Mmodel]

Где вы там стреляете, мне тоже интересно

[Sergunka]

Если хотите взять быка за рога, то разбирайтесь в deep learning:
https://www.coursera.org/specializations/deep-learning

Я уже вписался в этот курс. Хотелось бы за бабосы поговорить?

По спарку сейчас гоняем связку кашка-спарки-кассандра

Как человек нев"@-ого таланта исключительно в одной области решил прогнать курс на дите. Дите впряглось и за две недели выдало сертификат
https://www.coursera.org/account/accomp ... 2CFXUCVPRB

Сейчас раскачиваемся на соревнование на кегле. Есть кто еще компанию составить?
https://www.kaggle.com/c/sp-society-cam ... tification

[valchkou]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

[Sergunka]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.

[valchkou]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.

понятно спасибо. А почему каффка, а не rabbitmq к примеру?

[Sergunka]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.

понятно спасибо. А почему каффка, а не rabbitmq к примеру?

Просто кашка вроде как лучше интегрируется в нашем облаке https://www.predix.io/ cо спарком т.е. просто наша местная заморочка