Книга рекордов Привета.

SVK · Post by **SVK** » 01 Apr 2004 17:17

Dmitry67 wrote:Я работал с таблицей в 1'000'000'000 записей правда сами записи были короткие

Один из клиентов (не самый большой), использующих систему нашей компании, добавляет в базу в среднем 5,500,000 записей в день, и собирается иметь online доступ (до первого архивирования) 7 лет. Это должно получиться 14,052,500,000 записей в одной таблице с 250 partitions (размер что-то вроде 150-170 байтов на запись). Правда, 7 лет еще не прошло :lol:

В качестве DB engine используется DB2.

P.S. Прошу прощения, поправка: я ошибся - это 5,500,000 ключей для поиска, а записей в 4 раза меньше. То есть только 3,513,125,000 записей за 7 лет

UMLец · Post by **UMLец** » 01 Apr 2004 17:24

Code: Select all

N = 1             // Assume it is 0

zVlad · Post by **zVlad** » 01 Apr 2004 18:33

SVK wrote:
Dmitry67 wrote:Я работал с таблицей в 1'000'000'000 записей правда сами записи были короткие

Один из клиентов (не самый большой), использующих систему нашей компании, добавляет в базу в среднем 5,500,000 записей в день, и собирается иметь online доступ (до первого архивирования) 7 лет. Это должно получиться 14,052,500,000 записей в одной таблице с 250 partitions (размер что-то вроде 150-170 байтов на запись). Правда, 7 лет еще не прошло

В качестве DB engine используется DB2.

P.S. Прошу прощения, поправка: я ошибся - это 5,500,000 ключей для поиска, а записей в 4 раза меньше. То есть только 3,513,125,000 записей за 7 лет

What OS runs your DB2?

KVA · Post by **KVA** » 01 Apr 2004 18:41

OBender wrote:Да это мрачно конечно, но файл о котором я говорю по размеру ~700K и в нем 19 000 с чем то строк.

Да переплюнули вы меня. У меня файлец имеется (ядро очень толстого ActiveX) на 500К с 16К строк. Но сомневаюсь что ваш файл был checkin/checkout больше 910 раз (согласно VSS) как мой. :mrgreen:

OBender · Post by **OBender** » 01 Apr 2004 18:45

да, наш всего 650 раз

zVlad · Post by **zVlad** » 01 Apr 2004 19:07

Next nominee:

OLTP application:

SELECT statement with 11 subselects, and 4 UNIONs.
7 different tables involved (some of them few times).
Total size - 4918 Bytes,
non-blank characters - 3746.

Dmitry67 · Post by **Dmitry67** » 01 Apr 2004 19:08

Еще рекорд ПРивета
Тема US vs Россия
Обсуждена 10000 раз

SVK · Post by **SVK** » 01 Apr 2004 19:42

Dmitry67 wrote:Еще рекорд ПРивета
Тема US vs Россия
Обсуждена 10000 раз

А где статистика?

Или некто не поленился, прочитал весь Привет, и ставил 10,000 галочек на бумаге? :mrgreen:

SVK · Post by **SVK** » 01 Apr 2004 19:57

zVlad wrote: What OS runs your DB2?

Это не наша DB2, клиенты сами ее ведут, согласовываясь с требованиями интерфейса купленной ими системы.

У них z/OS. До этого вместо DB2 использовалась proprietory database в составе нашей системы. И требование на хранение было 3 года. Теперь опционально можно использовать также DBMS. И - по крайней мере для одной application - срок хранения увеличился до 7 лет. Жизнь покажет... :lol:

Sam Adams · Post by **Sam Adams** » 02 Apr 2004 00:29

(на прошлом месте работы)
метод из 2К строк, С++, индусы. Свалил оттуда, как только меня перебросили на тот проект - в жизни есть более увлекательные вещи

Strannik223 · Post by **Strannik223** » 02 Apr 2004 02:53

Mssql server.
Я сам.
Уперся в ограничение в 255 joined tables :mrgreen:

Надо было делать отчеты по объектам поля которых динамически определяются пользователями, по моему 3 или 4 join что бы получить 1 поле. Уже не помню как выкрутился

. Кажеться pivot table

zVlad · Post by **zVlad** » 02 Apr 2004 03:40

Strannik223 wrote:Mssql server.
Я сам.
Уперся в ограничение в 255 joined tables
Надо было делать отчеты по объектам поля которых динамически определяются пользователями, по моему 3 или 4 join что бы получить 1 поле. Уже не помню как выкрутился . Кажеться pivot table

Правильно ли будет понимать что во FROM clause нельзя перечислять больше 255 таблиц?

Dmitry67 · Post by **Dmitry67** » 02 Apr 2004 08:27

нельзя
а зачем ?

zVlad · Post by **zVlad** » 02 Apr 2004 12:36

Конечно нЕ зачем. Если мне память не изменяет в DB2 версии 6 это ограничение 15.

Вчера была истоия достойная книги рекордов Привета. Созданием индекса время выполнения удалось уменьшить с 40 минут до 8 секунд. А дело было так.
Для совсем другой программы я создал индекс. Ускорение хорошее, но не такое как выше. Поскольку у нас в DB2 все приложения статические и все запросы зранятся в каталоге я смог выявить другие программы, которые могут быть улучшены тем индексом.
Всего оказалось 15 программ. Для того чтобы они начали использовать новый индекс их нужно было перебайндить ("русское" слово заменяющее английское REBIND). Запустил соответствующее задание и оно "зависло" - ждет. Кого ждет? Та программа, о которой было вначале, была запущена и уже отработав 30 минут не выдала ни одного COMMIT и заблокировала мое задание.
Звоню аналисту, говорю надо бы вам добавить COMMITs, чтобы других не держать, как вы мол на продакшн с такой программой пойдете. На другой день добавляют COMMITs (а я им объясняю мол время конечно увеличится, но хоть с другими сможете работать одновременно), запускают - вылетает готовая через 8 секунд.
Все в шоке, никто не может понять почему. Наконец, сопоставив события я проверяю список программ, которые стали использовать новых индекс и естественно одной из них была та программа.

zVlad · Post by **zVlad** » 02 Apr 2004 12:43

Удалено....