CftClub.ru
Клуб специалистов ЦФТ-Банк

Изменения в ФИАС
На страницу Пред.  1, 2, 3
 
Ответить на тему    Клуб специалистов ЦФТ-Банк (IBSO) -> Настройка и сопровождение
Предыдущая тема :: Следующая тема  
Автор Сообщение
yaffil
Профи
Неподтвержденный


Вступление в Клуб: 18.08.2011
СообщениеВт Июл 25, 2017 12:04    Ответить с цитатой
Полезность: Нет оценки
По делу ничего. И формально не придерёшся, много зависит от настроек БД.

Начинали мы на тесте с 2х недель, ужались в 2-3 дня, на боевой в процессе выявили ещё что до настроить (вместо уменьшения времени с тестом получил увеличение) можно - уменьшило бы время еще на 30-40%, но это все требует ребута БД, что для меня не применимо было прерывать процесс импорта.
Но в целом все равно дофига, хотя тут народ пишет 5тью часами отделывался.
Gobur
Профи
Неподтвержденный


Вступление в Клуб: 06.11.2012
СообщениеВт Июл 25, 2017 14:11    Ответить с цитатой
Полезность: Нет оценки
Может железо такое. Но 75 часов как то жестко, я помню у нас часов 7-8 импортило в несколько потоков. (года 2 назад)
yaffil
Профи
Неподтвержденный


Вступление в Клуб: 18.08.2011
СообщениеВт Июл 25, 2017 14:45    Ответить с цитатой
Полезность: Нет оценки
Gobur пишет:
Может железо такое. Но 75 часов как то жестко, я помню у нас часов 7-8 импортило в несколько потоков. (года 2 назад)


Может, вот только мониторинг показал следующее в пнд, когда у всех была опа Very Happy

Загрузка сервера не превышает 3%. Ожидания ввода-вывода не более 5%. Сервер отдыхает более 95% времени

Три сессии в БД от шедулера выполняют оператор "INSERT INTO Z#HOUSES ..." .
Такой же оператор выполняет сессия от приложения NOVO118_44.EXE
У всех этих сессий, в пионерах по ожиданиям - освобождение буферов в кэше БД и завершение записи грязных буферов.
Эмиралька
Профи
Неподтвержденный


Вступление в Клуб: 09.11.2015
СообщениеВт Июл 25, 2017 14:58    Ответить с цитатой
Полезность: Нет оценки
yaffil пишет:
Gobur пишет:
Может железо такое. Но 75 часов как то жестко, я помню у нас часов 7-8 импортило в несколько потоков. (года 2 назад)


Может, вот только мониторинг показал следующее в пнд, когда у всех была опа Very Happy

Загрузка сервера не превышает 3%. Ожидания ввода-вывода не более 5%. Сервер отдыхает более 95% времени

Три сессии в БД от шедулера выполняют оператор "INSERT INTO Z#HOUSES ..." .
Такой же оператор выполняет сессия от приложения NOVO118_44.EXE
У всех этих сессий, в пионерах по ожиданиям - освобождение буферов в кэше БД и завершение записи грязных буферов.


Интересно было бы покопаться с оптимизацией этой задачки. Жаль, что мне она вряд ли достанется...
yaffil
Профи
Неподтвержденный


Вступление в Клуб: 18.08.2011
СообщениеВт Июл 25, 2017 15:13    Ответить с цитатой
Полезность: Нет оценки
Смотрю в дельте (от 20.07.2017) ЦФТ запретило указывать директорию с сервера, надо с клиента. Что увеличило время на 2 часа только для копирования на тот же сервер. Дабы жизнь малиной не казалась Laughing
Blackmore64
Участник
Неподтвержденный


Вступление в Клуб: 17.01.2017
СообщениеПт Июл 28, 2017 10:55    Ответить с цитатой
Полезность: Нет оценки
При импорте обновления от 20.07 (размер 638 Мб) ошибка

ORA-00001: APP-UNIQUE: Дублируется значение реквизита [Уникальный идентификатор записи. Ключевое поле.] в типе [HOUSES]
ORA-00001: нарушено ограничение уникальности (IBS.IDX_Z#HOUSES_HOUSEID)
ORA-06512: на "IBS.Z$FIAS_ADDR_IMP_FIAS_I13786807", line 2714
ORA-06512: на "IBS.Z$FIAS_ADDR_IMP_IMPORT_FIAS", line 193
ORA-06512: на "IBS.Z$U$13786808", line 104

В логе

Произошла ошибка при импорте справочника ФИАС:
ORA-00001: нарушено ограничение уникальности (IBS.IDX_Z#HOUSES_HOUSEID)
ORA-06512: на "IBS.Z$FIAS_ADDR_IMP_FIAS_I13786807", line 1697
ORA-06512: на "IBS.Z$FIAS_ADDR_IMP_FIAS_I13786807", line 2627

У всех так?
yaffil
Профи
Неподтвержденный


Вступление в Клуб: 18.08.2011
СообщениеПт Июл 28, 2017 11:39    Ответить с цитатой
Полезность: Нет оценки
Blackmore64 пишет:
При импорте обновления от 20.07 (размер 638 Мб) ошибка

У всех так?


Нет, у меня нормально отработала.
Blackmore64
Участник
Неподтвержденный


Вступление в Клуб: 17.01.2017
СообщениеВт Авг 08, 2017 15:33    Ответить с цитатой
Полезность: Нет оценки
Blackmore64 пишет:
При импорте обновления от 20.07 (размер 638 Мб) ошибка

ORA-00001: APP-UNIQUE: Дублируется значение реквизита [Уникальный идентификатор записи. Ключевое поле.] в типе [HOUSES]
ORA-00001: нарушено ограничение уникальности (IBS.IDX_Z#HOUSES_HOUSEID)
ORA-06512: на "IBS.Z$FIAS_ADDR_IMP_FIAS_I13786807", line 2714
ORA-06512: на "IBS.Z$FIAS_ADDR_IMP_IMPORT_FIAS", line 193
ORA-06512: на "IBS.Z$U$13786808", line 104


Ответ поддержки ЦФТ: "Предположительно, у вас есть записи в адресном справочнике с одинаковым AOID. Выполните операцию "Банковские продукты" → "Нормализация данных (служебный)" → "Адрес. Нормализация адресных справочников" с установленным признаком "неуникальные по глобальному идентификатору" и после этого выполните импорт ФИАС повторно".

Запустил нормализацию - удалилось 55 дублированных записей в справочнике "Адрес. Дома" (HOUSES) по реквизиту HOUSEGUID. После этого импорт проходит без ошибок.
Показать сообщения:   
Ответить на тему    Клуб специалистов ЦФТ-Банк (IBSO) -> Настройка и сопровождение Часовой пояс: GMT + 3
На страницу Пред.  1, 2, 3
Страница 3 из 3

 
Перейти:  
Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах
Рейтинг@Mail.ru