Что стреляет лучше по баблу Spark или ML?

[Big Cheese]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

Я в этом сезоне в VA получал офферы от гов контрактора 150, курятни-соковижималки 160 и контракт 90 с овертаймом, флексом и возможностью удаленки. В итоге на контракте получается ~215К на W2, но я ведь и по субботам работаю, хе-хе. Самое интересное, что собираюсь в Феврале найти другой баркас до лета, пусть даже и гуджаратскую галдящую курятню, потому что ну совсем уж тупая работа, теряю квалификацию. Но уже буду искать с чувством и расстановкой, если найду интересный R&D то пойду и на постоянку даже.

Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.

[Big Cheese]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

Оупентэйбыл?

Нет. Если интересно - могу в личку скинуть

Можно мне тоже?

Разумеется. ушло в лс

[Big Cheese]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

А принципалов с улицы берут?
А то у нас, по-моему, только доморощенные.
И у нас меду сеньором и принципалом - бездна. Принципал - это практически бог, эквивалент как минимум Sr Director в менеджерской линии.

Вчера одного взяли с улицы. Но у нас принципал значительно скромнее, чем в среднем по больнице. Соответствует старшему манагеру. Инфляция титулов..

[Pantigalt]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

Оупентэйбыл?

Нет. Если интересно - могу в личку скинуть

Мне тоже можно?

[Dweller]

Ну у нас база 185 и опций на 100 в год мат ожидание, staff ml eng
Stack airflow, python, Django, flask, scikit, aws, redshift
Spark нет, зоопарк и без него ещё тот
Клепаем быстро и на разном, за это и платят

[Mmodel]

Нефига невъежаю в эту тему но хочу разобратся

[Mmodel]

Точнее интересно что с этим сделать можно и получить своё бабло

[Big Cheese]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

Оупентэйбыл?

Нет. Если интересно - могу в личку скинуть

Мне тоже можно?

ушло в лс.

[rorp]

Нет. Если интересно - могу в личку скинуть

Интересно

[Kolbasoff]

Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.

У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash. Контора сама по себе хорошая, честная, без б/ш, но как у любой маленькой консалтинговой лавки подбирающей крошки с барских столов, все проекты у конторы не интересные. Деньги на данном этапе жизни меня не сильно волнуют, иначе бы я не гулял по 4 месяца в году. Буду с Нового Года искать спокойно и без суеты. Хорошие работы есть, просто надо искать. Сейчас не сезон, можно расслабиться до Февраля.

[XpoH]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

РСУ маловато будет, а так как везде
А что за профиль?

[Big Cheese]

FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.

РСУ маловато будет

Ну, с этим тяжело не согласиться!

А что за профиль?

профили разные - от С++ бекэнда до JavaScript UI/UX.

[АццкоМото]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.

[XpoH]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.

так про базу никто ничего не писал, база как база, как у всех, короче, но нынче РСУ все очень щедро насыпают.
как по опыту последних 2 лет, я бы брал бОльшую часть РСУ а не базой, а что будет дальше - поживем увидим

[АццкоМото]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.

так про базу никто ничего не писал, база как база, как у всех, короче, но нынче РСУ все очень щедро насыпают.
как по опыту последних 2 лет, я бы брал бОльшую часть РСУ а не базой, а что будет дальше - поживем увидим

а я бы брал бОльшую часть именно кэшэм, по крайней мере когда речь именно о таких порядках тотал комп.

ну а главное, не могу понять вашего подхода "про базу никто ничего не писал, речь про РСУ". скажите по-чесноку. утрированная ситуация. база 500к, РСУ - 5к (или, без утрирования, но держа тотал комп фиксированным - 270-290 база, 10 РСУ), вы тоже будете обсуждать, что везде РСУ больше наливают? я лично встану в очередь

[XpoH]

Вот сверху есть цифры, моя ремарка была что РСУ маловато и автор согласился.
Если дают 500 базы и 5 рсу надо брать, конечно, по второму примеру тоже надо брать если дают. Это если по-честноку.

[Big Cheese]

РСУ маловато будет

Ну, с этим тяжело не согласиться!

КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

При прочих равных бОльшая база, это, конечно, плюс. Просто раньше водка была вкуснее база была ниже, но РСУ наливали значительно щедрее, и тотал комп выглядел, условно говоря, 170 база + 180 РСУ.

[Big Cheese]

Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.

У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash.

Тупая работа - это очень напряжно, конечно. Надо менять. А насчет перспективности для развития - может, мне не везло всю дорогу, но вот попасть в такое место, чтобы было перспективно мне как-то не удавалось. Проблема курицы и яйца, наверно. По-этому в основном приходилось/приходится что-то мутить на стороне, или в свободное от работы время на работе. Потом уже попадаешь в место, которое было бы перспективным 2-3 года назад, а сейчас - ну, нормально, но ничего особо нового. Ну и звезд с неба я не хватаю.

[voyager3]

Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.

У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash.

Тупая работа - это очень напряжно, конечно. Надо менять. А насчет перспективности для развития - может, мне не везло всю дорогу, но вот попасть в такое место, чтобы было перспективно мне как-то не удавалось. Проблема курицы и яйца, наверно. По-этому в основном приходилось/приходится что-то мутить на стороне, или в свободное от работы время на работе. Потом уже попадаешь в место, которое было бы перспективным 2-3 года назад, а сейчас - ну, нормально, но ничего особо нового. Ну и звезд с неба я не хватаю.

Эх, всегда вспоминается миниатюра "95 квартала" про чувака, который не мог в 90е купить видеомагнитофон VHS, потом долго и много работал, поднялся и купил, наконец-то. В 2010м.

[Mmodel]

Где вы там стреляете, мне тоже интересно

[Sergunka]

Если хотите взять быка за рога, то разбирайтесь в deep learning:
https://www.coursera.org/specializations/deep-learning

Я уже вписался в этот курс. Хотелось бы за бабосы поговорить?

По спарку сейчас гоняем связку кашка-спарки-кассандра

Как человек нев"@-ого таланта исключительно в одной области решил прогнать курс на дите. Дите впряглось и за две недели выдало сертификат
https://www.coursera.org/account/accomp ... 2CFXUCVPRB

Сейчас раскачиваемся на соревнование на кегле. Есть кто еще компанию составить?
https://www.kaggle.com/c/sp-society-cam ... tification

[valchkou]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

[Sergunka]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.

[valchkou]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.

понятно спасибо. А почему каффка, а не rabbitmq к примеру?

[Sergunka]

По спарку сейчас гоняем связку кашка-спарки-кассандра

спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?

Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.

понятно спасибо. А почему каффка, а не rabbitmq к примеру?

Просто кашка вроде как лучше интегрируется в нашем облаке https://www.predix.io/ cо спарком т.е. просто наша местная заморочка