Что стреляет лучше по баблу Spark или ML?

Где деньги?

Spark
5
6%
Spark
5
6%
ML
1
1%
ML
1
1%
Spark+ML
6
8%
Spark+ML
6
8%
Ты кто
10
13%
Ты кто
10
13%
Кто эти люди
17
22%
Кто эти люди
18
23%
 
Total votes: 79

Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

Kolbasoff wrote: 22 Dec 2017 01:32
Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
Я в этом сезоне в VA получал офферы от гов контрактора 150, курятни-соковижималки 160 и контракт 90 с овертаймом, флексом и возможностью удаленки. В итоге на контракте получается ~215К на W2, но я ведь и по субботам работаю, хе-хе. Самое интересное, что собираюсь в Феврале найти другой баркас до лета, пусть даже и гуджаратскую галдящую курятню, потому что ну совсем уж тупая работа, теряю квалификацию. Но уже буду искать с чувством и расстановкой, если найду интересный R&D то пойду и на постоянку даже.
Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.
Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

АццкоМото wrote: 22 Dec 2017 05:57
Big Cheese wrote: 22 Dec 2017 05:36
rorp wrote: 21 Dec 2017 22:20
Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
Оупентэйбыл?
Нет. Если интересно - могу в личку скинуть
Можно мне тоже?
Разумеется. ушло в лс
Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

M. Ridcully wrote: 22 Dec 2017 06:06
Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
А принципалов с улицы берут?
А то у нас, по-моему, только доморощенные.
И у нас меду сеньором и принципалом - бездна. Принципал - это практически бог, эквивалент как минимум Sr Director в менеджерской линии.
Вчера одного взяли с улицы. Но у нас принципал значительно скромнее, чем в среднем по больнице. Соответствует старшему манагеру. Инфляция титулов..
Pantigalt
Уже с Приветом
Posts: 803
Joined: 24 Jan 2007 07:32
Location: Сергели->Новосибирск->SFBA->Новосибирск->Москва->NY->SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Pantigalt »

Big Cheese wrote: 22 Dec 2017 05:36
rorp wrote: 21 Dec 2017 22:20
Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
Оупентэйбыл?
Нет. Если интересно - могу в личку скинуть
Мне тоже можно?
Спи быстрее, твоя подушка нужна другому. Copyright Зощенко
User avatar
Dweller
Уже с Приветом
Posts: 12258
Joined: 20 Dec 2000 10:01
Location: Bellevue, WA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Dweller »

Ну у нас база 185 и опций на 100 в год мат ожидание, staff ml eng
Stack airflow, python, Django, flask, scikit, aws, redshift
Spark нет, зоопарк и без него ещё тот
Клепаем быстро и на разном, за это и платят
Mmodel
Уже с Приветом
Posts: 8193
Joined: 27 Mar 2016 23:56

Re: Что стреляет лучше по баблу Spark или ML?

Post by Mmodel »

Нефига невъежаю в эту тему но хочу разобратся
Mmodel
Уже с Приветом
Posts: 8193
Joined: 27 Mar 2016 23:56

Re: Что стреляет лучше по баблу Spark или ML?

Post by Mmodel »

Точнее интересно что с этим сделать можно и получить своё бабло
Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

Pantigalt wrote: 22 Dec 2017 07:15
Big Cheese wrote: 22 Dec 2017 05:36
rorp wrote: 21 Dec 2017 22:20
Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
Оупентэйбыл?
Нет. Если интересно - могу в личку скинуть
Мне тоже можно?
ушло в лс.
rorp
Уже с Приветом
Posts: 314
Joined: 24 May 2013 22:04

Re: Что стреляет лучше по баблу Spark или ML?

Post by rorp »

Big Cheese wrote: 22 Dec 2017 05:36 Нет. Если интересно - могу в личку скинуть
Интересно
User avatar
Kolbasoff
Уже с Приветом
Posts: 3481
Joined: 02 Jan 2005 22:10

Re: Что стреляет лучше по баблу Spark или ML?

Post by Kolbasoff »

Big Cheese wrote: 22 Dec 2017 06:10 Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.
У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash. Контора сама по себе хорошая, честная, без б/ш, но как у любой маленькой консалтинговой лавки подбирающей крошки с барских столов, все проекты у конторы не интересные. Деньги на данном этапе жизни меня не сильно волнуют, иначе бы я не гулял по 4 месяца в году. Буду с Нового Года искать спокойно и без суеты. Хорошие работы есть, просто надо искать. Сейчас не сезон, можно расслабиться до Февраля.
XpoH
Уже с Приветом
Posts: 2123
Joined: 08 Nov 2013 22:33
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by XpoH »

Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
РСУ маловато будет, а так как везде :great:
А что за профиль?
Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

XpoH wrote: 23 Dec 2017 02:22
Big Cheese wrote: 21 Dec 2017 08:08 FWIW, у нас сеньорам дают ~170-180 базы + 15% бонус + ~40-50K/y РСУ, принципал - 200-220 + 20% + 80К/y РСУ.. Контора в СФ.
РСУ маловато будет
Ну, с этим тяжело не согласиться! :)
XpoH wrote: 23 Dec 2017 02:22 А что за профиль?
профили разные - от С++ бекэнда до JavaScript UI/UX.
User avatar
АццкоМото
Уже с Приветом
Posts: 15242
Joined: 01 Mar 2007 05:18
Location: VVO->ORD->DFW->SFO->DFW->PDX

Re: Что стреляет лучше по баблу Spark или ML?

Post by АццкоМото »

Big Cheese wrote: 23 Dec 2017 05:36
XpoH wrote: 23 Dec 2017 02:22 РСУ маловато будет
Ну, с этим тяжело не согласиться! :)
КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.
Мат на форуме запрещен, блдж!
XpoH
Уже с Приветом
Posts: 2123
Joined: 08 Nov 2013 22:33
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by XpoH »

АццкоМото wrote: 23 Dec 2017 07:50
Big Cheese wrote: 23 Dec 2017 05:36
XpoH wrote: 23 Dec 2017 02:22 РСУ маловато будет
Ну, с этим тяжело не согласиться! :)
КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.
так про базу никто ничего не писал, база как база, как у всех, короче, но нынче РСУ все очень щедро насыпают.
как по опыту последних 2 лет, я бы брал бОльшую часть РСУ а не базой, а что будет дальше - поживем увидим :-)
User avatar
АццкоМото
Уже с Приветом
Posts: 15242
Joined: 01 Mar 2007 05:18
Location: VVO->ORD->DFW->SFO->DFW->PDX

Re: Что стреляет лучше по баблу Spark или ML?

Post by АццкоМото »

XpoH wrote: 23 Dec 2017 08:32
АццкоМото wrote: 23 Dec 2017 07:50
Big Cheese wrote: 23 Dec 2017 05:36
XpoH wrote: 23 Dec 2017 02:22 РСУ маловато будет
Ну, с этим тяжело не согласиться! :)
КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.

Да, из гуглобука все полтора человека, что с Приветом еще не завязали, сдержанно хмыкнули по части тотал комп, но вот база - и для них более, чем достойна.
так про базу никто ничего не писал, база как база, как у всех, короче, но нынче РСУ все очень щедро насыпают.
как по опыту последних 2 лет, я бы брал бОльшую часть РСУ а не базой, а что будет дальше - поживем увидим :-)
:pain1: а я бы брал бОльшую часть именно кэшэм, по крайней мере когда речь именно о таких порядках тотал комп.

ну а главное, не могу понять вашего подхода "про базу никто ничего не писал, речь про РСУ". скажите по-чесноку. утрированная ситуация. база 500к, РСУ - 5к (или, без утрирования, но держа тотал комп фиксированным - 270-290 база, 10 РСУ), вы тоже будете обсуждать, что везде РСУ больше наливают? я лично встану в очередь
Мат на форуме запрещен, блдж!
XpoH
Уже с Приветом
Posts: 2123
Joined: 08 Nov 2013 22:33
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by XpoH »

Вот сверху есть цифры, моя ремарка была что РСУ маловато и автор согласился.
Если дают 500 базы и 5 рсу надо брать, конечно, по второму примеру тоже надо брать если дают. Это если по-честноку.
Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

АццкоМото wrote: 23 Dec 2017 07:50
Big Cheese wrote: 23 Dec 2017 05:36
XpoH wrote: 23 Dec 2017 02:22 РСУ маловато будет
Ну, с этим тяжело не согласиться! :)
КМК в вашей СФБА (заметили? впервые за 1917 лет я не стал ничего про геев вкручивать) при базе в 200-220 РСУ в 80К это более чем адекватно для компании не из топ-10, как минимум. И много лучше, чем 150-170 базы и 130 РСУ, что есть планка, от которой большинство калифорнийских приветовцев начнут ссаться кипятком.
При прочих равных бОльшая база, это, конечно, плюс. Просто раньше водка была вкуснее база была ниже, но РСУ наливали значительно щедрее, и тотал комп выглядел, условно говоря, 170 база + 180 РСУ.
Big Cheese
Уже с Приветом
Posts: 1211
Joined: 02 Jul 2000 09:01
Location: SFBA

Re: Что стреляет лучше по баблу Spark или ML?

Post by Big Cheese »

Kolbasoff wrote: 23 Dec 2017 00:00
Big Cheese wrote: 22 Dec 2017 06:10 Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.
У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash.
Тупая работа - это очень напряжно, конечно. Надо менять. А насчет перспективности для развития - может, мне не везло всю дорогу, но вот попасть в такое место, чтобы было перспективно мне как-то не удавалось. Проблема курицы и яйца, наверно. По-этому в основном приходилось/приходится что-то мутить на стороне, или в свободное от работы время на работе. Потом уже попадаешь в место, которое было бы перспективным 2-3 года назад, а сейчас - ну, нормально, но ничего особо нового. Ну и звезд с неба я не хватаю.
voyager3
Уже с Приветом
Posts: 1951
Joined: 11 Mar 2015 01:12

Re: Что стреляет лучше по баблу Spark или ML?

Post by voyager3 »

Big Cheese wrote: 23 Dec 2017 23:22
Kolbasoff wrote: 23 Dec 2017 00:00
Big Cheese wrote: 22 Dec 2017 06:10 Сдается мне, что интересный для Вас R&D встречается редко, а в виде работы за деньги - исчезающе редко. У меня запросы в плане интересности значительно более сермяжные, чем у Вас, но и то что-либо стоящее попадается нечасто.
У меня сейчас работа не просто тупая, а очень тупая, бессмысленная, неверная с точки зрения инженерии, бесперспективная для моего развития, примитивная технически, как если бы C++ девелопера с опытом в многопоточности и оптимизации и немножко алгоритмах, заставить писать бесконечные скрипты на bash.
Тупая работа - это очень напряжно, конечно. Надо менять. А насчет перспективности для развития - может, мне не везло всю дорогу, но вот попасть в такое место, чтобы было перспективно мне как-то не удавалось. Проблема курицы и яйца, наверно. По-этому в основном приходилось/приходится что-то мутить на стороне, или в свободное от работы время на работе. Потом уже попадаешь в место, которое было бы перспективным 2-3 года назад, а сейчас - ну, нормально, но ничего особо нового. Ну и звезд с неба я не хватаю.
Эх, всегда вспоминается миниатюра "95 квартала" про чувака, который не мог в 90е купить видеомагнитофон VHS, потом долго и много работал, поднялся и купил, наконец-то. В 2010м.
Mmodel
Уже с Приветом
Posts: 8193
Joined: 27 Mar 2016 23:56

Re: Что стреляет лучше по баблу Spark или ML?

Post by Mmodel »

Где вы там стреляете, мне тоже интересно
User avatar
Sergunka
Уже с Приветом
Posts: 34205
Joined: 03 Dec 2000 10:01
Location: Vladivostok->San Francisco->Los Angeles->San Francisco

Re: Что стреляет лучше по баблу Spark или ML?

Post by Sergunka »

Sergunka wrote: 18 Dec 2017 22:47
Chessplayer wrote: 18 Dec 2017 07:18 Если хотите взять быка за рога, то разбирайтесь в deep learning:
https://www.coursera.org/specializations/deep-learning
Я уже вписался в этот курс. Хотелось бы за бабосы поговорить? :fr:

По спарку сейчас гоняем связку кашка-спарки-кассандра
Как человек нев"@-ого таланта исключительно в одной области решил прогнать курс на дите. Дите впряглось и за две недели выдало сертификат
https://www.coursera.org/account/accomp ... 2CFXUCVPRB

Сейчас раскачиваемся на соревнование на кегле. Есть кто еще компанию составить?
https://www.kaggle.com/c/sp-society-cam ... tification
"A patriot must always be ready to defend his country against his government." Edward Abbey
User avatar
valchkou
Уже с Приветом
Posts: 4185
Joined: 27 Apr 2011 03:43
Location: Сергели ->Chicago

Re: Что стреляет лучше по баблу Spark или ML?

Post by valchkou »

Sergunka wrote: 18 Dec 2017 22:47 По спарку сейчас гоняем связку кашка-спарки-кассандра
спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?
User avatar
Sergunka
Уже с Приветом
Posts: 34205
Joined: 03 Dec 2000 10:01
Location: Vladivostok->San Francisco->Los Angeles->San Francisco

Re: Что стреляет лучше по баблу Spark или ML?

Post by Sergunka »

valchkou wrote: 09 Jan 2018 05:34
Sergunka wrote: 18 Dec 2017 22:47 По спарку сейчас гоняем связку кашка-спарки-кассандра
спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?
Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.
"A patriot must always be ready to defend his country against his government." Edward Abbey
User avatar
valchkou
Уже с Приветом
Posts: 4185
Joined: 27 Apr 2011 03:43
Location: Сергели ->Chicago

Re: Что стреляет лучше по баблу Spark или ML?

Post by valchkou »

Sergunka wrote: 09 Jan 2018 05:45
valchkou wrote: 09 Jan 2018 05:34
Sergunka wrote: 18 Dec 2017 22:47 По спарку сейчас гоняем связку кашка-спарки-кассандра
спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?
Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.
понятно спасибо. А почему каффка, а не rabbitmq к примеру?
User avatar
Sergunka
Уже с Приветом
Posts: 34205
Joined: 03 Dec 2000 10:01
Location: Vladivostok->San Francisco->Los Angeles->San Francisco

Re: Что стреляет лучше по баблу Spark или ML?

Post by Sergunka »

valchkou wrote: 09 Jan 2018 05:49
Sergunka wrote: 09 Jan 2018 05:45
valchkou wrote: 09 Jan 2018 05:34
Sergunka wrote: 18 Dec 2017 22:47 По спарку сейчас гоняем связку кашка-спарки-кассандра
спарки-кассандра так с этим понятно.
а кафка зачем в этой цепи? какую проблему решает? не лишнее ли звено?
Там типо загрузил в блобстор файло большое плюнул в кашку что кушать подано... прогнал плюнул что кушать подали надо агрегирорвать уже из касандры касандра агрегировала плюнул в кашку что результат такой. Результат такой подписчик поднял в вебсокет - вебсокет выдавил в дашбоарду.

Так же есть варианты если файло мекое в пределах разумного то льется сразу в кашку ну и тд.
понятно спасибо. А почему каффка, а не rabbitmq к примеру?
Просто кашка вроде как лучше интегрируется в нашем облаке https://www.predix.io/ cо спарком т.е. просто наша местная заморочка
"A patriot must always be ready to defend his country against his government." Edward Abbey

Return to “Работа и Карьера в IT”