8K miles

[Komissar]

Ну вот и до моего консервативного болота докатились облака. AWS нависло грозовой тучей. Обычно из тучи льет как из ведра, но наша первая задача: залить оракловую базу в амазонские ведра. Девы мне грят, бум делать через 8K miles тулзы и инфраструктуру ( у фирмы какой то корп эккаунт с ними).

ктонить кушал этого зверя? Поделитесь опытом.

[8K]

... AWS нависло грозовой тучей ... 8K miles ... ктонить кушал? ...

Я не кушал, но чисто по приколу недавно уперся в интересный отлуп от DynamoDB:
TableLimitExceededException: Subscriber limit exceeded: There is a limit of 1500 tables per subscriber

Наверное, надо башлять. For any AWS account, there is an initial limit of 256 tables per region.

[Komissar]

мне произнесли слова S3 и Object Store. Это как то меняет картину?

[-helloworld-]

Вы им скажите, что амазонские ведра - это помёт динозавров, такой же легаси, как оракловая база. Крутые поцаны давно ушли в кубернатсы с Google Spanner.

[8K]

мне произнесли слова S3 и Object Store. Это как то меняет картину?

С S3 я еще в Амазоне говна наелся, но это было лет 5 назад. Какие-то траблы с хадупом и компрессией данных, уже точно не помню, но производительность оставляла желать лучшего. Ну, запинали, конечно, с японаматерью.

Впрочем, по нынешним временам весь софт из говна и палок сделан. Майкрософтовский Storage Spaces мал-мало похерил 50TB storage, не весь, конечно, так, примерно 0.3%. Решил диски почекать, а заодно и данные почикал.

[Ulitkan]

мне произнесли слова S3 и Object Store. Это как то меняет картину?

s3 - это закат солнца вручную. Вообще-то у AWS базы данных есть.
https://aws.amazon.com/rds/details/

[Sergunka]

мне произнесли слова S3 и Object Store. Это как то меняет картину?

s3 - это закат солнца вручную. Вообще-то у AWS базы данных есть.
https://aws.amazon.com/rds/details/

Да там даже Оракл шевелится чо то

https://aws.amazon.com/free/database/?s ... 14225545:s

[Komissar]

а что отцы порекомендуют, если стоит задача хранить 5-10М массивных файлов (2-5 Гб каждый), с набором metadata, причем metadata это просто flat table, никакой хитрой иерархии?

[Ulitkan]

Для файлов + метадейта s3 нормально. У них есть ещё альтернативные решения: EFS ещё какие-то в случае если файлы редко нужны ( Glacier?)

[Komissar]

Для файлов + метадейта s3 нормально. У них есть ещё альтернативные решения: EFS ещё какие-то в случае если файлы редко нужны ( Glacier?)

Во во мои девы про ледник тоже лепетали.

[Mark]

Про оригинальный вопрос: Oracle into AWS. Тут надо немного уточнить:
1. Какой downtime allowed на переезд
2. Какого размера база
3. Как ее админить после переезда (EC2 vs RDS)
Я последний год только и делаю что перетаскиваю Oracle в разные клауды (в основном конечно в AWS, но вот сейчас нарисовался ещё и Azure, ну и Oracle cloud тоже пытается чего то предлагать).
Про 8K miles могу сказать только то что если вам надо тащить без конвертации в другую платформу или трансформации, то использовать 8K это overkill.

[Вячеслав Викторович]

Про оригинальный вопрос: Oracle into AWS. Тут надо немного уточнить:
1. Какой downtime allowed на переезд
2. Какого размера база
3. Как ее админить после переезда (EC2 vs RDS)
Я последний год только и делаю что перетаскиваю Oracle в разные клауды (в основном конечно в AWS, но вот сейчас нарисовался ещё и Azure, ну и Oracle cloud тоже пытается чего то предлагать).
Про 8K miles могу сказать только то что если вам надо тащить без конвертации в другую платформу или трансформации, то использовать 8K это overkill.

я сейчас как раз этим занимаюсь. Перенесли в AWS RDS. В корпоративных требованиях к безопасности написано: использовать только зашифрованные соединения (SSL/TLS) и только "свои" сертификаты для этого. А AWS RDS оказывается не позволяет свои сертификаты использовать, только амазоновский. Мда...

[Mark]

Про оригинальный вопрос: Oracle into AWS. Тут надо немного уточнить:
1. Какой downtime allowed на переезд
2. Какого размера база
3. Как ее админить после переезда (EC2 vs RDS)
Я последний год только и делаю что перетаскиваю Oracle в разные клауды (в основном конечно в AWS, но вот сейчас нарисовался ещё и Azure, ну и Oracle cloud тоже пытается чего то предлагать).
Про 8K miles могу сказать только то что если вам надо тащить без конвертации в другую платформу или трансформации, то использовать 8K это overkill.

я сейчас как раз этим занимаюсь. Перенесли в AWS RDS. В корпоративных требованиях к безопасности написано: использовать только зашифрованные соединения (SSL/TLS) и только "свои" сертификаты для этого. А AWS RDS оказывается не позволяет свои сертификаты использовать, только амазоновский. Мда...

Ну да - для своих сертификатов только EC2. Просто чтоб заимпортить сертификат надо доступ к OS. А в RDS его нет.

[Вячеслав Викторович]

Про оригинальный вопрос: Oracle into AWS. Тут надо немного уточнить:
1. Какой downtime allowed на переезд
2. Какого размера база
3. Как ее админить после переезда (EC2 vs RDS)
Я последний год только и делаю что перетаскиваю Oracle в разные клауды (в основном конечно в AWS, но вот сейчас нарисовался ещё и Azure, ну и Oracle cloud тоже пытается чего то предлагать).
Про 8K miles могу сказать только то что если вам надо тащить без конвертации в другую платформу или трансформации, то использовать 8K это overkill.

я сейчас как раз этим занимаюсь. Перенесли в AWS RDS. В корпоративных требованиях к безопасности написано: использовать только зашифрованные соединения (SSL/TLS) и только "свои" сертификаты для этого. А AWS RDS оказывается не позволяет свои сертификаты использовать, только амазоновский. Мда...

Ну да - для своих сертификатов только EC2. Просто чтоб заимпортить сертификат надо доступ к OS. А в RDS его нет.

Ну там много чего забанено: SYSDBA и т.д.

[Mark]

Про оригинальный вопрос: Oracle into AWS. Тут надо немного уточнить:
1. Какой downtime allowed на переезд
2. Какого размера база
3. Как ее админить после переезда (EC2 vs RDS)
Я последний год только и делаю что перетаскиваю Oracle в разные клауды (в основном конечно в AWS, но вот сейчас нарисовался ещё и Azure, ну и Oracle cloud тоже пытается чего то предлагать).
Про 8K miles могу сказать только то что если вам надо тащить без конвертации в другую платформу или трансформации, то использовать 8K это overkill.

я сейчас как раз этим занимаюсь. Перенесли в AWS RDS. В корпоративных требованиях к безопасности написано: использовать только зашифрованные соединения (SSL/TLS) и только "свои" сертификаты для этого. А AWS RDS оказывается не позволяет свои сертификаты использовать, только амазоновский. Мда...

Ну да - для своих сертификатов только EC2. Просто чтоб заимпортить сертификат надо доступ к OS. А в RDS его нет.

Ну там много чего забанено: SYSDBA и т.д.

Дык RDS этаже fully managed solution. Естественно они большинство DBA функций блокируют.

[Easbayguy]

Дык RDS этаже fully managed solution. Естественно они большинство DBA функций блокируют.

Похоже я тут один мастадонт остался, докатываю последние базы на Solaris 11 до Oracle 12cR2. Порывы начальства все перевести в cloud наталкиваются на значительную дороговизну последнего.

[Ulitkan]

Дык RDS этаже fully managed solution. Естественно они большинство DBA функций блокируют.

Похоже я тут один мастадонт остался, докатываю последние базы на Solaris 11 до Oracle 12cR2. Порывы начальства все перевести в cloud наталкиваются на значительную дороговизну последнего.

Да нет, почему же. У нас OLTP базы все на Оракле. Начальство ругается что дорого и требует куда-нибудь перевести, но никто не хочет этим заниматься.

[valchkou]

оракл это всегда будет дорого и не важно куда его переезжать, потому что это политика оракла.
почему то эти ребята считают что раз заскочив на оракл вы больше не сможете с него слезть.
Поднимают цену из года в год.
за последние 2 года мы перевели несколько проектов с оракла на бесплатную монгу и кассандру.
Что любопытно оракл там особо и не нужен был, просто так получилось что оракл уже был под рукой и в целях экономии времени автоматом все втыкалось в него.
Плюс некоторые разрабы использовали оракловые фитчи, например пайплайн, доступные только в дорогих лицензиях.
Даунгреуднуть лицензию не получалось.

В итоге на одних только лицензиях было сэкономлено 500к в год.
К тому же как оказалось hardware требования попроще чем для оракла.

Чтобы оракл стал дешевле нужно просто от него избавиться, там где он не нужен.

[Mark]

Дык RDS этаже fully managed solution. Естественно они большинство DBA функций блокируют.

Похоже я тут один мастадонт остался, докатываю последние базы на Solaris 11 до Oracle 12cR2. Порывы начальства все перевести в cloud наталкиваются на значительную дороговизну последнего.

А чего не 18с ? )
На самом деле с клаудами есть разные варианты - и правильная Cloud architecture позволяет избежать кучи ненужных трат. Опять же большие клиенты могут торговаться как с Oracle так и cloud vendors. А остальным это довольно тяжело.

[Mark]

...

В итоге на одних только лицензиях было сэкономлено 500к в год.
...

Не на лицензиях - на annual support fee. То что вы заплатили за лицензии Oracle не возвращает

[Ulitkan]

У нас никто не даст в public cloud перейти безотносительно сколько это стоит. 1500 человек из Operations & Infrastructure тоже кушать хотят. А нахрен их столько если все перевести в cloud?

[Mark]

У нас никто не даст в public cloud перейти безотносительно сколько это стоит. 1500 человек из Operations & Infrastructure тоже кушать хотят. А нахрен их столько если все перевести в cloud?

Это да сопротивление внутри обычно давит переезды в Клауд. Ну я знаю пару примеров когда после нескольких outages подряд по вине внутренней инфраструктуры, менеджмент продавил переезд и потихоньку поувольнял кучу sysadmins/DBAs

[mskmel]

У нас никто не даст в public cloud перейти безотносительно сколько это стоит. 1500 человек из Operations & Infrastructure тоже кушать хотят. А нахрен их столько если все перевести в cloud?

Это как сопротивление компьютерам бухгалтеров с их книгами учёта и балансами.

[valchkou]

...

В итоге на одних только лицензиях было сэкономлено 500к в год.
...

Не на лицензиях - на annual support fee. То что вы заплатили за лицензии Oracle не возвращает

на сколько я понимаю и на том и на другом!
изменения были приурочены к дате пересмотра очередного договора с ораклом.
мы как раз в aws клауд переезжали и выяснилось что там почему то у оракла другие расценки и соглашения.
Руководство прикинуло и дало команду соскочить там где возможно, но со знаком плюс.
Небольшой командой под предводительством меня данная задача была успешно распланирована и выполнена примерно за 6 мес,
мне по результатам в том числе той работы накинули немного бабла и присвоили очередное звание.
Это был мой первый проект где мне позволили увидеть как моя усили напрямую влияют на бабло компании.
С одной стороны я был рад, но с другой если бы я был СТО я бы наверное за такое легко срубил 100к ввиде бонуса.

[alex_127]

... AWS нависло грозовой тучей ... 8K miles ... ктонить кушал? ...

Я не кушал, но чисто по приколу недавно уперся в интересный отлуп от DynamoDB:
TableLimitExceededException: Subscriber limit exceeded: There is a limit of 1500 tables per subscriber

Наверное, надо башлять. For any AWS account, there is an initial limit of 256 tables per region.

почти на все сервисы есть начальные ограничения - для вашего же блага. Например убедится что вы человек.