Бывают ли автоматические нормализаторы структур данных?

[OtherSide]

C ORM работал, но довольно поверхностно. Не знаю, вообще есть ли следующая штука.
Знаю, как из JSON в VS сгенерировать структуру классов.
А можно ли пойти дальше? Проанализировать структуру JSON и автоматически получить рекомендации для нормализации? Например повторяется поле "Иванов" или там "Кг" - значит можно перенести в отдельную таблицу.
Алгоритмически должно быть несложно.

И еще попутно вопрос, а есть ли в ORM встроенная поддержка версий. Напрмер есть у группы таблиц поле version - где то один раз указать, что бы не каждый раз передавать в запросах .

[tessob]

Если вы напишете ваш ORM tool, будет значительно проще чем-то помочь. К сожалению все экстрасенсы поокинули этот форум и сделали свой.

[OtherSide]

Если вы напишете ваш ORM tool, будет значительно проще чем-то помочь. К сожалению все экстрасенсы поокинули этот форум и сделали свой.

Я пока не выбрал, но вообще раньше пользовался Entity Framework и NHibernate

Но это по моему вообще не про ORM, должна справлятся какая нибуть простая утилитка, или рисовалка структур, что-то такое

[tessob]

А что не взять и не написать своё? Может я старомодный, но у меня так обычно получается избежать оверхеда и полученный результат всегда соответствует ожиданиям.

Попробуйте Jackson. Он довольно просто через аннотации все делает. Однако, я опасаюсь, что он, как и я, не сильно вам поможет с ‘нормализацией’. Просто нифига не понятно, что вы под этим подразумеваете.

[OtherSide]

А что не взять и не написать своё? Может я старомодный, но у меня так обычно получается избежать оверхеда и полученный результат всегда соответствует ожиданиям.

Попробуйте Jackson. Он довольно просто через аннотации все делает. Однако, я опасаюсь, что он, как и я, не сильно вам поможет с ‘нормализацией’. Просто нифига не понятно, что вы под этим подразумеваете.

ищу тулзу как раз для того, что бы не писать свое
под нормализацией понимаю вторую нормальную форму, разнесение по ключам, я вроде написал
сканировало строки на повторяющиеся записи и создавало справочники

[Boriskin]

Жаба, хайбернейт, ентити манагерс, спринг + jackson JSON to Java entity etc. Вам туда дорога.

[OtherSide]

Во первый я пишу под .net

во вторых, ну хибернейт, дальше?

Вот есть например одна большая таблица с 20 колонками и кучей повторяющихся полей. Хочу на выходе 5 отдельных таблиц, с со сгенеренными ключами, что бы занимало меньше места в памяти в 10 раз. Конкретно что для этого надо сделать?

[Palych]

Вот есть например одна большая таблица с 20 колонками и кучей повторяющихся полей. Хочу на выходе 5 отдельных таблиц, с со сгенеренными ключами, что бы занимало меньше места в памяти в 10 раз. Конкретно что для этого надо сделать?

"На выходе" - это где?
Хотите чтобы структура базы изменилась? Чтобы она нарисовала скрипты для изменения и переноса данных?
Или чтобы внутри хранить не так как оно в базе?

[OtherSide]

Вот есть например одна большая таблица с 20 колонками и кучей повторяющихся полей. Хочу на выходе 5 отдельных таблиц, с со сгенеренными ключами, что бы занимало меньше места в памяти в 10 раз. Конкретно что для этого надо сделать?

"На выходе" - это где?
Хотите чтобы структура базы изменилась? Чтобы она нарисовала скрипты для изменения и переноса данных?
Или чтобы внутри хранить не так как оно в базе?

Положим, залил один Json, а на выходе - 5. Ну или какой нибуть другой универсальный формат

[OtherSide]

Попробую добавить немного конкретики. Я тут доламал одну программку с кучей данных, хочу сделать веб версию. Пока данные просто серилизовал в JSON, VS мне легко отдал сгенерированные под них классы. Но с JSON понятно можно работать только в режиме демки, рано или поздно надо залить в БД.
Не очень хочется делать кучу рутинной работы.
Вот бы нашлась тулза, которая разковыряет этот JSON в кучу нормализоаваных других JSON, из которых можно нагенерить классов.
Ну а классы насколько я знаю уже можно будет легко запихать в ORM code2database.

Еще короче: хочу один кривой Json => прямая и красивая структура DB Mssql

[OtherSide]

http://pojo.sodhanalibrary.com/convertJsonToSQL.html

вот даже нагуглил что то, но хотелось бы что то посерьезней

[tessob]

под нормализацией понимаю вторую нормальную форму, разнесение по ключам, я вроде написал
сканировало строки на повторяющиеся записи и создавало справочники

У JSON ассоциативный массив (штука с ключами) - это только одна из нескольких форм представления данных. Есть ещё листы. Если вам нужно что-то сгруппировать по ключу, то для этого не нужно делать 5 файлов. Можно присвоить ключу лист листов и у вас получится «таблица». У вас же объектно ориентированный язык. JSON отлично подходит для описания композиции данных.

Вы уверены, что хорошо понимаете json как стандарт?

[KinDzaDza]

Попробую добавить немного конкретики. Я тут доламал одну программку с кучей данных, хочу сделать веб версию. Пока данные просто серилизовал в JSON, VS мне легко отдал сгенерированные под них классы. Но с JSON понятно можно работать только в режиме демки, рано или поздно надо залить в БД.
Не очень хочется делать кучу рутинной работы.
Вот бы нашлась тулза, которая разковыряет этот JSON в кучу нормализоаваных других JSON, из которых можно нагенерить классов.
Ну а классы насколько я знаю уже можно будет легко запихать в ORM code2database.

Еще короче: хочу один кривой Json => прямая и красивая структура DB Mssql

Может уже и не надо, но далеко не всегда нормализация - панацея от всех бед. Все зависит от конкретных запросов и обьема данных. Джойнить миллионные таблицы с фильтрацией и сортировкой - то еше занятие.
Без понимания как это все за кадром устроено в каком-нибудь магическом фрэймворке можно потом отлично поскакать на граблях. Когда будет уже довольно поздно что-либо менять.