Вход | Регистрация
 

Как обычно ускоряют типовые загрузки остатков в ERP?

Как обычно ускоряют типовые загрузки остатков в ERP?
Я
   Сияющий Асинхраль
 
11.09.20 - 18:22
Есть типовая выгрузка из УПП в ERP. Запускали, через пару недель вырубили - не дождались результатов. Попытался делать выгрузку кусками, отдельными справочниками, документами (отдельными типами по отдельной организации), остатками тоже по организации. Файл трехгиговой выгрузки части справочников загружается третий день :-( (это размер XML файла), выгрузка всех справочников тянет гигов на шестьдесят - с такой скоростью и за пол года остатки не загрузятся. Причем сама ERP работает относительно шустро. На данный момент сервер 1С и SQL разнесены. Что можно посоветовать клиенту, кроме как приобрести комп по производительности входящий в первую десятку компов :-( . Попросил системного администратора проанализировать - каких ресурсов не хватает (сервера виртуальные, добавить можно всего, по-необходимости), ничего кроме оперативки пока не нашел... Процессор почти не задействован в загрузке, сеть тоже, но загрузка висит уже третий день (загрузка идет с помощью универсальной выгрузки-загрузки XML), ошибок тоже не показывает...
   Надо работать
 
1 - 11.09.20 - 18:52
(0) подсказать клиенту что уже Пентюм давно выпустили
   Dmitry1c
 
2 - 11.09.20 - 18:53
(0) 3гб не очень много так-то


а в жр че-нить происходит в базе ERP?
   H A D G E H O G s
 
3 - 11.09.20 - 19:36
(0) Переписывают. Я могу это сделать
   HeKrendel
 
4 - 11.09.20 - 20:12
(0) напиши обмен
   RetardedToBoot
 
5 - 11.09.20 - 20:24
Если процессор почти не задействован, то это однозначно маловато оперативки. Значит проц сидит в ожидании событий от диска. Всегда так было.
   Вафель
 
6 - 11.09.20 - 20:28
выгружайте каждый справочник отдельно
   Сияющий Асинхраль
 
7 - 11.09.20 - 20:53
(3) Переписать я и сам могу :-))) , но для УПП с полным комплексом документов и произвдоством, это задача не на пару недель, вот и хотелось бы воспользоваться типовой конвертацией... А у меня сейчас таких задач еще пара тройка...
(1) Считаешь клиент в облаке на 486DX4 работает :-)))
(2) Сейчас все висит, но ты прав - придется влезать в это глубже...
(4) Морально готовлюсь к этому :-))) , ну и к тому, что придется клиенту озвучить сумму сильно превышающую первоначальную :-)))
(6) Можно попытаться, но я уже достаточно сильно разбил выгрузку на подобъекты. Там одни Контрагенты весят два гига...
(5) А вот это интересно. Спасибо. Попробую поговорить с системщиком...
   H A D G E H O G s
 
8 - 11.09.20 - 21:07
(7) Вольному воля.
   МихаилМ
 
9 - 11.09.20 - 21:22
я бы сделал генерацию скл базы. выгрузку всех связанныз данных sql скриптами.
   shuhard
 
10 - 12.09.20 - 11:27
(0)[выгрузка всех справочников тянет гигов на шестьдесят - с такой скоростью и за пол года остатки не загрузятся]
1) для остатков не нужны все справочники, только аналитика текущих остатков
2) объём НСИ явно указывает на наличие присоединенных файлов, возможно картинок к номенклатуре или сканов договоров

что делать - выгрузить в xls аналитику партий на складах, взаиморасчетов, ОС, малоценку
сравнить то, что нужно реально с 60 Гбайт, найти причину распухания, снять копию УПП и зачистить на сиквеле лишние данные



(7)[но для УПП с полным комплексом документов и произвдоством,]
документы каким боком к начальным остаткам ?
баланс да - по всем разделам учета нужен
   shuhard
 
11 - 12.09.20 - 11:28
(7)[ Там одни Контрагенты весят два гига.]
и на каждом есть остатки взаиморасчетов - не верю (с)
   Вафель
 
12 - 12.09.20 - 11:28
разве присоединенные файлы выгружаются обычной выгрузкой?
   Вафель
 
13 - 12.09.20 - 11:29
(11) нужны не только с остатками, но все рабочие по которым допустим был оборот в последние полгода
   shuhard
 
14 - 12.09.20 - 11:31
(13) это твои фантазии
   ДенисЧ
 
15 - 12.09.20 - 11:32
(13) И сколько там их штук всего?
   shuhard
 
16 - 12.09.20 - 11:35
(15) Вафель откуда может это знать ?
   Вафель
 
17 - 12.09.20 - 11:37
(14) в последний перенос у нас такие требования были
   shuhard
 
18 - 12.09.20 - 11:41
(17) то, что можно перейти с начала 4 квартала - понятно
1) ТС описывает проблемы ввода начальных остатков
2) новые контрагенты и новые договора менее 10% от начальных остатков,
   ДенисЧ
 
19 - 12.09.20 - 11:45
(16) Я ещё не до конца потерял веру в человечество...
(17) А в этом? В тз это есть?
   Вафель
 
20 - 12.09.20 - 11:58
про этот спрашивай у тс
   Сияющий Асинхраль
 
21 - 12.09.20 - 12:32
(16) Вафель правильно оценил ситуацию. Действительно, нужны остатки на конец года, и весь год движений. Но на данный момент я не то, документы буду писать сам, а вот справочники и остатки хотелось бы загрузить типовой выгрузкой, но на данный момент даже справочники не проходят...
   Сияющий Асинхраль
 
22 - 12.09.20 - 12:34
+(21) Написал криво, надо читать так "Выгрузку документов за год я буду писать сам, (уже частично написал), а вот справочники и остатки хотелось бы пропустить через типовую выгрузку"
   Сияющий Асинхраль
 
23 - 12.09.20 - 12:39
Загрузка трех гигов прошла :-( , загрузилось 590 000 объектов, на это потратилось Четыре дня :-(
   H A D G E H O G s
 
24 - 12.09.20 - 12:48
(23) у вас какие то системные проблемы
   Сияющий Асинхраль
 
25 - 12.09.20 - 13:01
(24) Это я понимаю. Поскольку загрузка все-таки прошла. Сейчас исследую вопрос глубже. Авось на пару с системщиком решу...
   Вафель
 
26 - 12.09.20 - 13:16
нужно коцать типовуой обмен и отключать выгрузку по ссылкам там где это возможно
   Krendel
 
27 - 12.09.20 - 14:14
(23)Чот долговато, я 1,3 кк грузил порядка 6-8 часов
   Krendel
 
28 - 12.09.20 - 14:14
с выгрузкой
   ДенисЧ
 
29 - 12.09.20 - 14:29
(23) Ответь на (15)
   Ёпрст
 
30 - 12.09.20 - 16:36
(23) Это вообще не объем, 3 гига на файл это ничто..
 
 Рекламное место пустует
   Конструктор1С
 
31 - 12.09.20 - 16:37
(0) "Файл трехгиговой выгрузки части справочников загружается третий день"

А это уже "производительность" всемогущей КД
   Ёпрст
 
32 - 12.09.20 - 16:40
(0) Правила свои через кд2 ? и через универсальный обмен ?
Или как ?
   Конструктор1С
 
33 - 12.09.20 - 16:41
+(31) обмен в стандартном формате XML на 3 гига грузится за минуты. Ну полчаса, если железо слабое
   Ёпрст
 
34 - 12.09.20 - 16:55
(33) так и есть..
мот у него доки потом перепроводятся ? Т.е он без движений пихает выгрузку, хз..
   Вафель
 
35 - 12.09.20 - 17:07
проводить доки в момент загрузки - это сильное решение
   mistеr
 
36 - 12.09.20 - 18:12
(34) А ты как себе представляешь выгрузку из УПП в ERP *с движениями*? О_О
   Ёпрст
 
37 - 12.09.20 - 18:28
(36) А че, нельзя что ле ? :))
   Ёпрст
 
38 - 12.09.20 - 18:29
Кто запрещает ?
   Сияющий Асинхраль
 
39 - 13.09.20 - 00:35
(34) Какие документы? Я же сказал перегружаю типовой выгрузкой от 1С ТОЛЬКО справочники, и то не все, три гига - это только данные по Номенклатуре. Типовая выгрузка-загрузка "Универсальным обменом данных в формате XML", правила типовые, те самые, которые 1С предлагает для переноса данных из УПП в ERP. Сисадмин, освободил оперативки 48 Гигов, но это не сильно помогло, сегодня целый день загружались двухгиговые Контрагенты (тоже справочник), и так до конца не дошли...
   Ёпрст
 
40 - 13.09.20 - 00:36
(39) да ну нахрен ?
помимо справочников, РС тоже тащаться ?
   Ёпрст
 
41 - 13.09.20 - 00:36
3 гига это не больше 20 минут
   Ёпрст
 
42 - 13.09.20 - 00:36
тем более, справочники


Список тем форума
Рекламное место пустует  Рекламное место пустует
ВНИМАНИЕ! Если вы потеряли окно ввода сообщения, нажмите Ctrl-F5 или Ctrl-R или кнопку "Обновить" в браузере.