Акела промахнулся! В смысле, Интел обосрался

zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

Dmitry67 wrote: 12 Jan 2018 19:10
zVlad wrote: 12 Jan 2018 18:57
Dmitry67 wrote: 12 Jan 2018 18:33 ......
А data storages тоже в лизе?
Не знаю, может быть. Storage другая команда занимается.
Просто это странно. У нас отработавшие диски должны уничтожаться. Физически. Хотя наверное сам контроллер может быть в лизе
Ты говоришь о каких дисках? Локальных, тех что в серваке? Или тех что в SAN, NAS?
У мэйнфрэйм никогда не было локальных дисков (несколько лет назад правда появились SSD локальные, но только для страничного обмена, для больших страниц виртуальной памяти).
Диски всегда были .... нет не SAN и не NAS, но внешние и их производили и производят все кто производит диски вообще, включая саму IBM, конечно. Представляют они из себя стойки поболее самих мэйнфрэйм и значительно, в которых есть серваки и куча физичекских носителей на которых организованы RAID-5, например. В этих же стойках SAN и/или NAS для Windows/Unix/Linux серверов находятся тоже. Каналы МФ и прочих серваков к этим стойкам дисков физически разные и не совместимы по протоколам.
Перед возвращением дисков мы их инициализируем так что прочитать с них ничего не получится. Есть у нас такие средства.
User avatar
Dmitry67
Уже с Приветом
Posts: 28294
Joined: 29 Aug 2000 09:01
Location: SPB --> Gloucester, MA, US --> SPB --> Paris

Re: Акела промахнулся! В смысле, Интел обосрался

Post by Dmitry67 »

zVlad wrote: 12 Jan 2018 20:07
Dmitry67 wrote: 12 Jan 2018 19:10
zVlad wrote: 12 Jan 2018 18:57
Dmitry67 wrote: 12 Jan 2018 18:33 ......
А data storages тоже в лизе?
Не знаю, может быть. Storage другая команда занимается.
Просто это странно. У нас отработавшие диски должны уничтожаться. Физически. Хотя наверное сам контроллер может быть в лизе
Ты говоришь о каких дисках? Локальных, тех что в серваке? Или тех что в SAN, NAS?
У мэйнфрэйм никогда не было локальных дисков (несколько лет назад правда появились SSD локальные, но только для страничного обмена, для больших страниц виртуальной памяти).
Диски всегда были .... нет не SAN и не NAS, но внешние и их производили и производят все кто производит диски вообще, включая саму IBM, конечно. Представляют они из себя стойки поболее самих мэйнфрэйм и значительно, в которых есть серваки и куча физичекских носителей на которых организованы RAID-5, например. В этих же стойках SAN и/или NAS для Windows/Unix/Linux серверов находятся тоже. Каналы МФ и прочих серваков к этим стойкам дисков физически разные и не совместимы по протоколам.
Перед возвращением дисков мы их инициализируем так что прочитать с них ничего не получится. Есть у нас такие средства.
О.любых дисках
Разумеется, большинство в SAN/NAS
Но у нас считается что любой формат плох
Кто его знает, нутро современных SSD (надеюсь у вас давно не осталось старых вращающихся?)
Поэтому только физическое уничтожение
Зарегистрированный нацпредатель, удостоверение N 19719876044787 от 22.09.2014
User avatar
Dmitry67
Уже с Приветом
Posts: 28294
Joined: 29 Aug 2000 09:01
Location: SPB --> Gloucester, MA, US --> SPB --> Paris

Re: Акела промахнулся! В смысле, Интел обосрался

Post by Dmitry67 »

zVlad wrote: 12 Jan 2018 19:49. Тем на менее ты говоришь о виртуальных корах шесть штук (пусть в среднем, но это все равно значит что количество ограничено) на виртуалку. А если окажется что виртуалка "задыхается" на своих шести/десяти/двух корах, а все остальные 994/990/998 ничем на загружены?
Windows давно поддерживает hot cpu plug in. Метрик и алертов полно. Но я бы не хотел чтобы виртуалки расширились на автомате. Может это просто runaway?
Зарегистрированный нацпредатель, удостоверение N 19719876044787 от 22.09.2014
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

Dmitry67 wrote: 12 Jan 2018 20:13 ...
Разумеется, большинство в SAN/NAS
Но у нас считается что любой формат плох
Кто его знает, нутро современных SSD (надеюсь у вас давно не осталось старых вращающихся?)
Поэтому только физическое уничтожение
Нет, у нас "старые", вращающиеся. SSD было бы слишком дорого для нашего клиента. Мы даже у IBM диски не берем, даже вращающиеся - опять же, дорого. Зато у нас однопроцессорный мэйнфрэйм есть, за поллимона. И я не иронизирую, это себя окупает, я имею в виду МФ.
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

Dmitry67 wrote: 12 Jan 2018 20:18 ...Но я бы не хотел чтобы виртуалки расширились на автомате. Может это просто runaway?
Это очень зависит от интелекта того менеджера ресурсов, который будет "подбрасывать" дровишки.
LPAR - менеджер ресурсов на МФ для партиций (не виртуалок) может назначенное количество процов партиции сократить в определенных условиях (запарковать).
Все должно быть под контролем естественно, как по добавлению так и сокращению ресурсов виртуалки и/или партиции. Есть такое средство Intelligent Resource Director. Доступен только с zOS. Почитай:

https://en.m.wikipedia.org/wiki/Intelli ... e_Director

В двух словах перебрасывает ресурсы между партициями с учетом достижения целей в каждой из них. Т.е. подбрасывает дровишки тем партициям где с достижением не важно получается забирая у тех где все в шоколаде.
В DB2 есть механизм изменения размеров буферных пулов, опять же на основе анализа достижения поставленных целей.
User avatar
Dmitry67
Уже с Приветом
Posts: 28294
Joined: 29 Aug 2000 09:01
Location: SPB --> Gloucester, MA, US --> SPB --> Paris

Re: Акела промахнулся! В смысле, Интел обосрался

Post by Dmitry67 »

zVlad wrote: 12 Jan 2018 20:30
Dmitry67 wrote: 12 Jan 2018 20:13 ...
Разумеется, большинство в SAN/NAS
Но у нас считается что любой формат плох
Кто его знает, нутро современных SSD (надеюсь у вас давно не осталось старых вращающихся?)
Поэтому только физическое уничтожение
Нет, у нас "старые", вращающиеся. SSD было бы слишком дорого для нашего клиента. Мы даже у IBM диски не берем, даже вращающиеся - опять же, дорого. Зато у нас однопроцессорный мэйнфрэйм есть, за поллимона. И я не иронизирую, это себя окупает, я имею в виду МФ.
А можно подтолкнуть сторедж просто.третьей стороны, типа NetApp, EMC итд?
Зарегистрированный нацпредатель, удостоверение N 19719876044787 от 22.09.2014
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

Dmitry67 wrote: 12 Jan 2018 20:49 ...
А можно подтолкнуть сторедж просто.третьей стороны, типа NetApp, EMC итд?
У нас ЕМС как раз и "подталкивается" (what ever you mean). Ленты магнитные у нас были заменены на виртуальные, на "вращающихся" дисках от ЕМС.
StrangerR
Уже с Приветом
Posts: 38016
Joined: 14 Dec 2006 20:13
Location: USA

Re: Акела промахнулся! В смысле, Интел обосрался

Post by StrangerR »

zVlad wrote: 12 Jan 2018 20:07
Перед возвращением дисков мы их инициализируем так что прочитать с них ничего не получится. Есть у нас такие средства.
Нда. У нас такое даже наш слабенький аудит не прошло бы... Инициализировать (даже форматировать) вообще то недостаточно.
StrangerR
Уже с Приветом
Posts: 38016
Joined: 14 Dec 2006 20:13
Location: USA

Re: Акела промахнулся! В смысле, Интел обосрался

Post by StrangerR »

zVlad wrote: 12 Jan 2018 20:30
Dmitry67 wrote: 12 Jan 2018 20:13 ...
Разумеется, большинство в SAN/NAS
Но у нас считается что любой формат плох
Кто его знает, нутро современных SSD (надеюсь у вас давно не осталось старых вращающихся?)
Поэтому только физическое уничтожение
Нет, у нас "старые", вращающиеся. SSD было бы слишком дорого для нашего клиента. Мы даже у IBM диски не берем, даже вращающиеся - опять же, дорого. Зато у нас однопроцессорный мэйнфрэйм есть, за поллимона. И я не иронизирую, это себя окупает, я имею в виду МФ.
Ну я и говорю, дикие цены. Ставим дешевую стойку от HP, MSA2040, две полки, одну дисками по 6TB в RAID6 другую SSD в RAID10, получаем двух тировую (архив и пефоменс) SAN за всего то каких то тысяч 80 (и то за счет 25 SSD дисков - 800 GB SAN grade - $2000 за штуку). И это low level, есть и повыше.

(И получаем сразу 60 TB из которых горячие блоки на 10 живут на SSD.)
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

Dmitry67 wrote: 12 Jan 2018 20:18 .....Метрик и алертов полно.
Кстати об алертах.
В нашем офисе кроме меня еще один русскоговорящий есть. Мы с ним пьем кофе, обедаем, гулять ходим. Он тим лид по Wintel сервакам. У него 12 человек и пара тысяч серверов. Есть ESX-ы, и Hyper-V, и в облако их микрософтовское тащит не подетски.
Так вот список основных его проблем, которые мы то и дело обсуждаем:

- alerts. Они внедрили систему новомодную которая следит за кучей параметров на серваках и выдает автоматом тикеты. Вот приходит Иван утром, а у него в очереди тысяча тикетов о том что была загрузка CPU на том или другом сервере больше 60%. И вот ему на все надо ответить, закрыть тикет как минимум.

- asset refresh. Постоянно идет работа по замене старого на новое. Это только на первый глаз тривиальная работа, но в ней столько ньюансов что идет эта работа очень медленно. Попытки агрегирования ресурсов в стойки унифицированные тоже мало помогает. Старые приложения, которые в новых средах/версиях не хотят работать и никто не может понять почему. И т.п.

- как отбиться от пользователей клиента и наших разработчиков от требований дать administrator rights на тот или иной сервер. Последняя история была рассказана (причем после долгого его разговора по телефону на эту тему с кем-то после которого от него пар валил и пена хлопьями сыпалась. Весь офис обратил на это внимание) о том что когда то был запрошен administrator на некий сервак, предоставлен, но клиент этим не пользовался. Недавно решил таки попользоваться и оказалось что админа у его профиля нет, и он просит это восстановить и дать тоже на другой сервер.
Вот основные проблемы их группы в 12 человек. И я рядом сижу один, мэйнфрэйм жужит, проблем нет, и жужать будет еще два года, даже после моего ухода на пенсию.

12 * С$200 000 = С$2 400 000 в год. Наши мэйнфрэйм дешевле стоят на пять лет.
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

StrangerR wrote: 12 Jan 2018 21:04 ...
Ну я и говорю, дикие цены. Ставим дешевую стойку от ...
Я этими вопросами не занимаюсь, цен не знаю и сказать ничего не могу. Глядя на наши стойки дисков от ЕМС я одно лишь могу сказать что они не десятки тысяч, а сотни тысяч и миллионы стоят.
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

mskmel wrote: 12 Jan 2018 19:20
zVlad wrote: 12 Jan 2018 18:06 У Вас есть перед глазами приложение на х86 с 2400 ядрами?
Вот честно не хочется мериться у кого больше :D
Потому коротко: Да. 2400 это совсем небольшая величина. Производительность примерно одной стойки. Один ДЦ много стоек. ДЦ тоже много.
Есть два метода решения любой проблемы/задачи.
Силовой, это когда если задача не решается имеющимися ресурсами то ресурсы добавляются не глядя на эффективность их использования.
Интеллектуальный, это когда делается попытка повысить эффективность использования ресурсов чтобы решить задачу на том же или мепьшем их размере.
Оба метода работают. Какой из них лучше можно спорить до хрипоты.
Это очень приблизительно выражает наши споры и подходы. На самом деле все гораздо сложнее, но хвастаться количеством элементов могущих иметь малое отношение к собственно цели ради которой это количество создается выглядит наивно. В конце концов так можно всю планету заставить этими ДЦ и жить будет негде. Тогда зачем?

Это так в общем. Более технично можно возразить следущим образом. Вы на станете спорить что имея малое количество исполнительных механизмов (CPU если хотите) издержки на собственно управление ими, т.е. распределение работы между ними, будет малым. А если таких механизмов много, то и издержки будет только выше. В нашем случае для распределения работы мы используем те же самые CPU. Таким образом из 2400 коров может оказаться что 240 будут заняты только решением задачи о том на какой кор сдиспетчировать готовую задачу. У каждого кора, если все они под одной системой и система эта с разделением времени будет свой таймер, считающий квант времени и прерывающий процесс, только затем чтобы посмотреть а нет ли другой готовой задачи для выполнения. А когда прерванная задача будет сдиспетчированая не на тот проц где она выполнялась, то данные уже загруженные в тот проц надо будет снова грузить в другой, освободившийся проц. И так далее и тому подобное.
Создание системы из множества независимых узлов и решение задачи на этих узлах разбивая ее на куски тоже мало спасает, постольку хотя бы поскольку что эти куски надо будет собрать, упорядочить и выдать.
Только один вариант не вызывает сомнения в таком силовом подходе, это когда делается нечто вроде колективизации в сталинской России, где собирали всех личных коров в одно место и ходили их доить и кормить на ферму. Конечно под это можно что-то такое сделать на ферме для коров или их хозяев чего в каждом отдельном хлеве, силами единоличника создать дорого или накладно. В нашем случае это мощныйю широкополосный выход в интернет, более эффективные системы охлаждения, бесперебойное энергообеспечение и ремонты вышедшего из строя оборудования.

Вот и все. Строить набоскреб у себя во дворе накладно и небезопасно.
И дело тут вовсе не в дешевизне элементов систем. В итоге, согласно фундаментальным законам природы, для выполнения той или иной работы нужны определенные ресурсы. Плюс-минус, в зависимости от бойкости исполнителя.
zVlad
Уже с Приветом
Posts: 15420
Joined: 30 Apr 2003 16:43
Has thanked: 1 time

Re: Акела промахнулся! В смысле, Интел обосрался

Post by zVlad »

StrangerR wrote: 12 Jan 2018 21:01
zVlad wrote: 12 Jan 2018 20:07
Перед возвращением дисков мы их инициализируем так что прочитать с них ничего не получится. Есть у нас такие средства.
Нда. У нас такое даже наш слабенький аудит не прошло бы... Инициализировать (даже форматировать) вообще то недостаточно.
Например? Как можно прочитать что было записано на дорожке диска если вся она размагничена. Как можно прослушать песню с магнитной ленты если на нее записали другую песню или просто шум?
Я знаю один способ: подвигать магнитными головками туда-сюда. У нас используется мнгократная, очень много, запись специальных кодов. Специалисты по дискам считают этот способ надежным. Хотя, учитывая что зачастую при жизни дисков доступ к ним не на сто процентов закрыт, то удаление информации уже снятой с носителей путем физического уничтожения носителей выглядит наивным.

Есть еще вариант когда на дисках хранится криптографированная инфа. Нужно ли упираться форматировать такие диски или их физически уничтожать? Не параноя ли это?
User avatar
Мальчик-Одуванчик
Уже с Приветом
Posts: 15526
Joined: 27 Sep 2007 22:53

Re: Акела промахнулся! В смысле, Интел обосрался

Post by Мальчик-Одуванчик »

zVlad wrote: 12 Jan 2018 22:14 удаление информации уже снятой с носителей путем физического уничтожения носителей выглядит наивным.
А это как раз, никого не волнует в корпоративном мире - будут они уничтожены или нет.
Здесь главная цель - избавиться от ответственности и прикрыть свою задницу на этот случай.
Именно поэтому уничтожением носителей занимаются якобы специализированные и сертифицированные самостоятельные бизнесы.
mskmel
Уже с Приветом
Posts: 946
Joined: 24 Sep 2013 05:58
Location: US\GA

Re: Акела промахнулся! В смысле, Интел обосрался

Post by mskmel »

zVlad wrote: 12 Jan 2018 21:57
Я больше не каркаю!!!! Оказывается не все МФ у нас перестреляли.

zVlad, срочно хелп!

Попросили у товарищей выгрузку некоторых данных в текстовый файл, еще не зная что на той стороне МФ.
Умный разработчик сказал - сделал:
- Выгрузил, копирую!
30 минут
- Мужик, а ты надеюсь его gzip?
- У нас тут MF и нет gzip!
- ????
30 минут позже
- во! Скачалось ко мне на PC. Пакую...
10 минут позже
- круто, всего 3ГБ вышло
Доставил его мне, а там МФ формат! Какой идиот это придумал?!

Как ЭТО сконвертировать в человеческий формат под Linux\Solaris\HPUX\Windows? Я попросил ребят в нормальный формат, они делают, но они эту выгрузку много часов ждали.
последнее поле

Code: Select all

ХХХ POSITION( 135 ) TIMESTAMP EXTERNAL( 26) NULLIF( 161)='?
Правда что у zos нет gzip?

Return to “Вопросы и новости IT”