kaggle.com - competitions

User avatar
M. Ridcully
Уже с Приветом
Posts: 12017
Joined: 08 Sep 2006 20:07
Location: Силиконка

Re: kaggle.com - competitions

Post by M. Ridcully »

+KPOT+ wrote: 25 Sep 2018 18:28 Гады держут цены 1080 на уровне $460-$500. Сейчас же вышли уже карточки 2000 поколения, но пока не дешевеет.
А нафига, если GPU уже есть в public clouds?
На гуглоклауде работают отлично. На AWS тоже, хотя именно для GPU чуток замороченно, ИМХО.
Ажур не проверял, но скорее всего тоже вполне рабочий вариант.
Мир Украине. Свободу России.
User avatar
Sergunka
Уже с Приветом
Posts: 34164
Joined: 03 Dec 2000 10:01
Location: Vladivostok->San Francisco->Los Angeles->San Francisco

Re: kaggle.com - competitions

Post by Sergunka »

M. Ridcully wrote: 25 Sep 2018 21:02
+KPOT+ wrote: 25 Sep 2018 18:28 Гады держут цены 1080 на уровне $460-$500. Сейчас же вышли уже карточки 2000 поколения, но пока не дешевеет.
А нафига, если GPU уже есть в public clouds?
На гуглоклауде работают отлично. На AWS тоже, хотя именно для GPU чуток замороченно, ИМХО.
Ажур не проверял, но скорее всего тоже вполне рабочий вариант.
Когда своя карта тогда попроще и навыков вроде как побольше получается - там установить, библиотеки правильно подобрать. Гонять в облаках тоже конечно кучеряво, но там типо бабло надо платить как-то жаба давит :angry:
"A patriot must always be ready to defend his country against his government." Edward Abbey
User avatar
M. Ridcully
Уже с Приветом
Posts: 12017
Joined: 08 Sep 2006 20:07
Location: Силиконка

Re: kaggle.com - competitions

Post by M. Ridcully »

Sergunka wrote: 27 Sep 2018 22:59 Гонять в облаках тоже конечно кучеряво, но там типо бабло надо платить как-то жаба давит :angry:
Да, но зато не надо сразу кругленькую сумму выкатывать за карточку. А они ещё и устаревают периодически... Плюс когда у себя гоняете - за электричество платите, ну и т.д. - то есть ещё посчитать надо, не факт, что дешевле окажется.
Чем мне гуглоклауд понравился, в отличие от амазона: у них GPU(s) можно подключать к любому типу инстанса, и сколько хочешь. У амазона предопределённые типы, вроде, то есть если хочешь GPU - то такая-то конфигурация остального железа. К тому же в гуглоклауде можно несколько GPUs подключать.
Как я делал. Завёл собственный image, туда установил Куду и всё другое, что требуется. Это всё можно делать на самом дешёвом инстансе с одним кором и без GPU - стоить практически копейки будет, а может и во free tire попать или какие там промоушены есть, если ещё не использовал. Компилять Куду, кстати, тоже можно на инстансе без GPU. И потом использовал дорогие инстансы с GPU только для собственно запуска уже скомпилированных программ. Поднял-запустил-получил ответ-зашатдаунил. Всё это автоматизируется. Плюс можно поэкспериментировать с preemptible instances - дешевле будет (но нужно быть готовому, что иногда табуретку из под жопы выбивать будут).

Добавлю: ещё клауд хорош тем, что можно разные GPU и их комбинации попробовать.
Мир Украине. Свободу России.
User avatar
Sergunka
Уже с Приветом
Posts: 34164
Joined: 03 Dec 2000 10:01
Location: Vladivostok->San Francisco->Los Angeles->San Francisco

Re: kaggle.com - competitions

Post by Sergunka »

Ну дык сейчас 5 фолдеров считаются больше 10 часов - сколько это по баблу будет?
"A patriot must always be ready to defend his country against his government." Edward Abbey
User avatar
M. Ridcully
Уже с Приветом
Posts: 12017
Joined: 08 Sep 2006 20:07
Location: Силиконка

Re: kaggle.com - competitions

Post by M. Ridcully »

Sergunka wrote: 28 Sep 2018 01:03 Ну дык сейчас 5 фолдеров считаются больше 10 часов - сколько это по баблу будет?
Я не знаю, что такое "5 фолдеров" :D
Я если что не ML гонял, я просто Куду по букварю учил. Для меня вполне хватало, на всё про всё копейки заплатил.
Цену тут есть: https://cloud.google.com/gpu/
Мир Украине. Свободу России.
Chessplayer
Уже с Приветом
Posts: 345
Joined: 27 Nov 2007 05:33

Re: kaggle.com - competitions

Post by Chessplayer »

M. Ridcully wrote: Я не знаю, что такое "5 фолдеров" :D
Я если что не ML гонял, я просто Куду по букварю учил. Для меня вполне хватало, на всё про всё копейки заплатил.
Цену тут есть: https://cloud.google.com/gpu/
Nvidia K80 on demand $0.45/hr. K80 это конечно круто, но цены кусаются.



Sent from my iPhone using Tapatalk
User avatar
АццкоМото
Уже с Приветом
Posts: 15276
Joined: 01 Mar 2007 05:18
Location: VVO->ORD->DFW->SFO->DFW->PDX

Re: kaggle.com - competitions

Post by АццкоМото »

M. Ridcully wrote: 27 Sep 2018 23:38а может и во free tire попать или какие там промоушены есть
Афигеть! Гугл бесплатно раздает покрышки! Скорее ссылку в студию, мне надо!
Мат на форуме запрещен, блдж!
User avatar
АццкоМото
Уже с Приветом
Posts: 15276
Joined: 01 Mar 2007 05:18
Location: VVO->ORD->DFW->SFO->DFW->PDX

Re: kaggle.com - competitions

Post by АццкоМото »

Chessplayer wrote: 28 Sep 2018 04:07
M. Ridcully wrote: Я не знаю, что такое "5 фолдеров" :D
Я если что не ML гонял, я просто Куду по букварю учил. Для меня вполне хватало, на всё про всё копейки заплатил.
Цену тут есть: https://cloud.google.com/gpu/
Nvidia K80 on demand $0.45/hr. K80 это конечно круто, но цены кусаются.
Ммм... если по 10 часов в день крутить, то это 4.50. Т.е. примерно как маленький, холодный и невкусный сэндвич на заправке. Или меньше, чем я плачу за толлывэи в день. Или чуть больше, чем полпачки сигарет. Меньше пинты пива. Кусуче, чо
Мат на форуме запрещен, блдж!
User avatar
+KPOT+
Уже с Приветом
Posts: 7691
Joined: 03 Oct 2014 06:12

Re: kaggle.com - competitions

Post by +KPOT+ »

АццкоМото wrote: 28 Sep 2018 13:56
M. Ridcully wrote: 27 Sep 2018 23:38а может и во free tire попать или какие там промоушены есть
Афигеть! Гугл бесплатно раздает покрышки! Скорее ссылку в студию, мне надо!
Наверное, речь таки шла об Амазоне.
User avatar
АццкоМото
Уже с Приветом
Posts: 15276
Joined: 01 Mar 2007 05:18
Location: VVO->ORD->DFW->SFO->DFW->PDX

Re: kaggle.com - competitions

Post by АццкоМото »

+KPOT+ wrote: 28 Sep 2018 14:00
АццкоМото wrote: 28 Sep 2018 13:56
M. Ridcully wrote: 27 Sep 2018 23:38а может и во free tire попать или какие там промоушены есть
Афигеть! Гугл бесплатно раздает покрышки! Скорее ссылку в студию, мне надо!
Наверное, речь таки шла об Амазоне.
Ага, судя по фразе "Чем мне гуглоклауд понравился, в отличие от амазона", так и есть. Задолбали уже нечитатели. Лишь бы в лужу перышко поставить, остальное пох: камент высран, день прожит не зря :sadcry:
Мат на форуме запрещен, блдж!
User avatar
Sergunka
Уже с Приветом
Posts: 34164
Joined: 03 Dec 2000 10:01
Location: Vladivostok->San Francisco->Los Angeles->San Francisco

Re: kaggle.com - competitions

Post by Sergunka »

АццкоМото wrote: 28 Sep 2018 13:59
Chessplayer wrote: 28 Sep 2018 04:07
M. Ridcully wrote: Я не знаю, что такое "5 фолдеров" :D
Я если что не ML гонял, я просто Куду по букварю учил. Для меня вполне хватало, на всё про всё копейки заплатил.
Цену тут есть: https://cloud.google.com/gpu/
Nvidia K80 on demand $0.45/hr. K80 это конечно круто, но цены кусаются.
Ммм... если по 10 часов в день крутить, то это 4.50. Т.е. примерно как маленький, холодный и невкусный сэндвич на заправке. Или меньше, чем я плачу за толлывэи в день. Или чуть больше, чем полпачки сигарет. Меньше пинты пива. Кусуче, чо
Там могут быть и скорее всего будут маленькими буквами дополнительные фи за экаунт и тд. потом играть надо месяца три так, что тут как ни крути, а полкарты и отобьется за одну игру.
"A patriot must always be ready to defend his country against his government." Edward Abbey
User avatar
+KPOT+
Уже с Приветом
Posts: 7691
Joined: 03 Oct 2014 06:12

Re: kaggle.com - competitions

Post by +KPOT+ »

Вот тут чувак рассказывает как он Амазоном пользовался. Мне кажется, легче свою карточку таки купить. А там забудешь во время выключить машину и попадёшь на бабки 😀
https://medium.freecodecamp.org/what-i- ... 123e17a36b
User avatar
M. Ridcully
Уже с Приветом
Posts: 12017
Joined: 08 Sep 2006 20:07
Location: Силиконка

Re: kaggle.com - competitions

Post by M. Ridcully »

+KPOT+ wrote: 28 Sep 2018 19:27 А там забудешь во время выключить машину и попадёшь на бабки 😀
А если борщ на плите оставить? Можно и дом спалить! :umnik1:

Вообще я не то чтобы спорю, если кто непременно свою карточку купить хочет - просто написал, что есть и другая опция, которую можно попробовать.
Мир Украине. Свободу России.
User avatar
АццкоМото
Уже с Приветом
Posts: 15276
Joined: 01 Mar 2007 05:18
Location: VVO->ORD->DFW->SFO->DFW->PDX

Re: kaggle.com - competitions

Post by АццкоМото »

Sergunka wrote: 28 Sep 2018 18:14
АццкоМото wrote: 28 Sep 2018 13:59
Chessplayer wrote: 28 Sep 2018 04:07
M. Ridcully wrote: Я не знаю, что такое "5 фолдеров" :D
Я если что не ML гонял, я просто Куду по букварю учил. Для меня вполне хватало, на всё про всё копейки заплатил.
Цену тут есть: https://cloud.google.com/gpu/
Nvidia K80 on demand $0.45/hr. K80 это конечно круто, но цены кусаются.
Ммм... если по 10 часов в день крутить, то это 4.50. Т.е. примерно как маленький, холодный и невкусный сэндвич на заправке. Или меньше, чем я плачу за толлывэи в день. Или чуть больше, чем полпачки сигарет. Меньше пинты пива. Кусуче, чо
Там могут быть и скорее всего будут маленькими буквами дополнительные фи за экаунт и тд. потом играть надо месяца три так, что тут как ни крути, а полкарты и отобьется за одну игру.
Да ну. Гоголь этой ерундой не страдает, прайсинг очень прозрачный.

Я при этом согласен, что купить карточку будет для многих дешевле. (Хотя для меня — не факт, возможно, придется покупать контупер целиком). Просто соглашаясь на 45 центов/час не подписываешься под что-то серьезное. А вот 500-1500 сразу это несколько больно.

Кстати, с гуглоклаудом я, пожалуй, попробую, если выйдет все настроить. А вот локальный сетап чойта совсем никак не привлекает
Мат на форуме запрещен, блдж!
User avatar
M. Ridcully
Уже с Приветом
Posts: 12017
Joined: 08 Sep 2006 20:07
Location: Силиконка

Re: kaggle.com - competitions

Post by M. Ridcully »

Кстати, вдогонку - есть ещё такая штука как google cloud source repositories.
Если кто не знает, и кому нужна альтернатива private repositories за смешные деньги.
Если ещё и девелопмент на их же инстансах, то очень удобно ИМХО.
Мир Украине. Свободу России.

Return to “Работа и Карьера в IT”