CftClub.ru
Клуб специалистов ЦФТ-Банк

ФИАС на 15.2
На страницу Пред.  1, 2, 3, 4, 5, 6, 7, 8, 9, 10  След.
 
Ответить на тему    Клуб специалистов ЦФТ-Банк (IBSO) -> Настройка и сопровождение
Предыдущая тема :: Следующая тема  
Автор Сообщение
egor_spb
Участник - экстремал


Вступление в Клуб: 28.09.2007
СообщениеЧт Май 14, 2015 11:45    Ответить с цитатой
Полезность: Нет оценки
yaffil пишет:
А ты блин, все таки иногда полезно не согласиться с ЦФТ. Ответ ЦФТ (новые сроки реагирования на не соответсвия шокируют, было 2 недели, сейчас сами видите какой срок) Laughing
Цитата:

Добрый день!
Ваш запрос рассмотрен и передан на выполнение, работы по запросу BS00926089 планируется завершить 07.08.2015 18:00:00.

Изменения будут включены в очередное обновление Системы, номер обновления будет указан в запросе на сайте сопровождения сразу после его определения.


Т.е. заявка BS00917828, которая реализована в 15.1.09,15.2.01 проблемы загрузки ФИАС не решает? И до августа месяца пробовать грузить не имеет смысла? А то у меня на тесте на 14.6 только загружалось нормально. На рабочую так и не установил ФИАС, а теперь ни на 15.1, ни на 15.2 не получается...
yaffil
Профи


Вступление в Клуб: 18.08.2011
СообщениеЧт Май 14, 2015 11:52    Ответить с цитатой
Полезность: Нет оценки
Там, я так понял, тупо сделали екзепшен на уникальный констрейнт, чтобы при импорте из файла второй такой же ИД игнорился и продолжалась загрузка.
Про разбор временной таблицы им, видимо, никто не сказал т.к. просто никто не мог дойти до данного этапа Laughing
Pupil
Участник - экстремал


Вступление в Клуб: 27.02.2014
СообщениеЧт Май 14, 2015 12:42    Ответить с цитатой
Полезность: Нет оценки
egor_spb пишет:
yaffil пишет:
А ты блин, все таки иногда полезно не согласиться с ЦФТ. Ответ ЦФТ (новые сроки реагирования на не соответсвия шокируют, было 2 недели, сейчас сами видите какой срок) Laughing
Цитата:

Добрый день!
Ваш запрос рассмотрен и передан на выполнение, работы по запросу BS00926089 планируется завершить 07.08.2015 18:00:00.

Изменения будут включены в очередное обновление Системы, номер обновления будет указан в запросе на сайте сопровождения сразу после его определения.


Т.е. заявка BS00917828, которая реализована в 15.1.09,15.2.01 проблемы загрузки ФИАС не решает? И до августа месяца пробовать грузить не имеет смысла? А то у меня на тесте на 14.6 только загружалось нормально. На рабочую так и не установил ФИАС, а теперь ни на 15.1, ни на 15.2 не получается...


Аналогично. А поторопить с исполнением запроса ЦФТ-шников возможно?Если мы создадим новый запрос или это бессмысленно.
Alkov
Профи


Вступление в Клуб: 23.09.2010
СообщениеСр Май 20, 2015 05:22    Ответить с цитатой
Полезность: Нет оценки
yaffil пишет:
А поторопить с исполнением запроса ЦФТ-шников возможно?Если мы создадим новый запрос или это бессмысленно.


Бессмыслено, они объединят с существующим..по крайней мере у меня пару раз так было Wink
Pupil
Участник - экстремал


Вступление в Клуб: 27.02.2014
СообщениеСр Май 20, 2015 10:20    Ответить с цитатой
Полезность: Нет оценки
Pupil пишет:
Написал в ФИАС:
В файлах HOUSE77 и в HOUSE50 присутствуют n-ое количество файлов с одинаковыми HOUSEID, в результате происходит нарушение уникальности при импорте в Автоматизированную банковскую систему.
Планируется ли это устранить и в какие сроки?
Посмотрим что ответят....


Ответ:
Добрый день!
Дом раньше был в Московской области, теперь в Москве.
Т.к. приходится выгружать исторические данные по домам, то они попадают в оба файла.
yaffil
Профи


Вступление в Клуб: 18.08.2011
СообщениеСр Май 20, 2015 10:26    Ответить с цитатой
Полезность: Нет оценки
Pupil пишет:
Дом раньше был в Московской области, теперь в Москве.
Т.к. приходится выгружать исторические данные по домам, то они попадают в оба файла.


Московию расширили уже N-цать лет назад. Как они до 15.1 то грузили? Laughing
nobel
Профи


Вступление в Клуб: 28.09.2011
СообщениеСр Май 20, 2015 12:10    Ответить с цитатой
Полезность: 1
поделюсь своим опытом в решении данной проблемы.в мае как и у всех были проблемы с подгрузкой дельты ФИАС.запрашивали информацию по данному вопросу.сначала ЦФТ сослались на ФИАс что они накосячили и у них не уникальны данные и влепили консультацию со временем.Потом признали все таки свою ошибку и убрали часы и написали что решится в ближайших дополнениях.
После перехода на версию 15.3 и установки дополнений пробовал снова подгрузить дельту но он ругался на города федерального значения(Севастополь,Питер и прочие подобные) и еще были ошибки по дубликатам населенных пунктов/улиц.Решил данную проблем по простому-просто удалить лишние дубликаты(по городам федерального значения удалил регион а город оставил).После этого дельта подгрузилась нормально.
Начал анализировать адреса-в частности улиц без привязки к населенным пунктам.Около 686 тыс записей.

Решил теперь обновить полностью ФИАС на тесте.Обычную схему пробовали "Подгрузка во временные->Обработка в боевые таблицы".Во время подгрузки возникала ошибка только в том что не хватало памяти под индексы(8 ГБ добавили).После этого без каких либо ошибок все подгрузилось.Во время обработки возникла ошибка тоже в памяти но только по данным уже(если не ошибаюсь T_USR).После добавления 4 ГБ все нормально закончилось.Были ошибки не критического характера-например по москве ругался что не уникальны записи или во время удаления данных тоже были не уникальны записи.В общей сложности вся подгрузка ФИАС заняла три дня.
Решил после подгрузки проверить сколько же объектор по улицам с пустыми города?Оказалось что стало 9 тыс.Почти в 70 раз уменьшилось.
Как обычно всегда подгружали дельту с момента перехода на ФИАС(это было в прошлом году) и все строго последовательно по датам выпуска.Но видимо ЦФТ оптимизировали свой код в марте после того как появились дубликаты домов.
Pupil
Участник - экстремал


Вступление в Клуб: 27.02.2014
СообщениеСр Май 20, 2015 13:05    Ответить с цитатой
Полезность: Нет оценки
Круто у Вас есть 15.3))
Вроде по графику она в июне выходит.
nobel
Профи


Вступление в Клуб: 28.09.2011
СообщениеСр Май 20, 2015 15:30    Ответить с цитатой
Полезность: Нет оценки
вернее 15.2.опечатался просто.мы стараемся всегда переходить на последнюю актуальную версию(+2 недели с даты ее выхода)
nobel
Профи


Вступление в Клуб: 28.09.2011
СообщениеСр Май 20, 2015 15:31    Ответить с цитатой
Полезность: Нет оценки
по поводу обновления на боевой схеме у нас с адином вышло такой вариант-грузим во временные таблицы на тест последнюю версию ФИАС а потом по линку заливаем во временные таблицы на боевой.А потом останется только запустить обработку и все готово.
Матвеев Евгений
Профи


Вступление в Клуб: 31.01.2012
СообщениеЧт Май 21, 2015 08:16    Ответить с цитатой
Полезность: Нет оценки
nobel пишет:
по поводу обновления на боевой схеме у нас с адином вышло такой вариант-грузим во временные таблицы на тест последнюю версию ФИАС а потом по линку заливаем во временные таблицы на боевой.А потом останется только запустить обработку и все готово.


...и сколько времени уходит на загрузку данных по линку с тестовой на рабочую?
nobel
Профи


Вступление в Клуб: 28.09.2011
СообщениеЧт Май 21, 2015 08:25    Ответить с цитатой
Полезность: Нет оценки
пока еще не пробовали.сейчас идет подгрузка только на тест ФИАС от 18 мая.
судя по большому объему данных если с нуля подгружать на боевую(не по линку передавать данные) будет долго и по времени и очень много логов из за этого на базе(у нас был случай что боевая база встала из большого количества логов когда подгружали недествительные паспорта)
Матвеев Евгений
Профи


Вступление в Клуб: 31.01.2012
СообщениеЧт Май 21, 2015 08:48    Ответить с цитатой
Полезность: Нет оценки
nobel пишет:
пока еще не пробовали.сейчас идет подгрузка только на тест ФИАС от 18 мая.
судя по большому объему данных если с нуля подгружать на боевую(не по линку передавать данные) будет долго и по времени и очень много логов из за этого на базе(у нас был случай что боевая база встала из большого количества логов когда подгружали недествительные паспорта)


Я вчера в 21-00 запустил на тестовую закачку в 4 потока полного ФИАСА, сегодня надеюсь получить результат, надеюсь он будет положительным
Перед этим несколько раз пробовал, натыкался на проблему "неуникальности" houseid в house50 и house77, решена тем что в house50 реквизит enddate был выставлен на 01011979 для пересекающихся с house77, там в исходниках в ЦФТшной LIBе стоит проверка на актуальность адресов строго больше опер. дня
Так что либо всё загрузится, либо (что так же вполне ожидаемо) выйду на какую нибудь новую траблу...
Время покажет
Матвеев Евгений
Профи


Вступление в Клуб: 31.01.2012
СообщениеЧт Май 21, 2015 08:50    Ответить с цитатой
Полезность: Нет оценки
nobel пишет:
пока еще не пробовали.сейчас идет подгрузка только на тест ФИАС от 18 мая.
судя по большому объему данных если с нуля подгружать на боевую(не по линку передавать данные) будет долго и по времени и очень много логов из за этого на базе(у нас был случай что боевая база встала из большого количества логов когда подгружали недествительные паспорта)


Просто интересно стало как была организована передача данных по линку... Вы там что то дописывали?
yaffil
Профи


Вступление в Клуб: 18.08.2011
СообщениеЧт Май 21, 2015 09:14    Ответить с цитатой
Полезность: Нет оценки
Матвеев Евгений пишет:
Просто интересно стало как была организована передача данных по линку... Вы там что то дописывали?


Наверно как то так:

SQLPlus Copy Syntax
Oracle V7.3-11.1
Description     Example

>>──COPY────┬─FROM─database──────────────┬─────────────────────────────>
├─TO───database──────────────┤
└─FROM─database──TO─database─┘
>─┬─APPEND──┬──destination_table──┬────────────────┬──USING query─────><
├─CREATE──┤ │ v───,────┐ │
├─INSERT──┤ └─(───column─┴─)─┘
└─REPLACE─┘
Показать сообщения:   
Ответить на тему    Клуб специалистов ЦФТ-Банк (IBSO) -> Настройка и сопровождение Часовой пояс: GMT + 3
На страницу Пред.  1, 2, 3, 4, 5, 6, 7, 8, 9, 10  След.
Страница 6 из 10

 
Перейти:  
Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах
Рейтинг@Mail.ru