Вопросы по теме 'checkpoint'

Есть ли какой-либо инструмент, который поддерживает профилирование использования памяти на основе контрольных точек для С++?
Я работаю над сетевым приложением. Я хочу видеть использование памяти между различными этапами моего приложения, например использование памяти между инициализацией и выпуском или использование памяти между отправкой и получением. Я гуглил и пытался...
444 просмотров

Эквивалент тегов SVN в TFS 2012
Недавно я перешел на TFS 2012 и долгое время работал с SVN . В SVN я использовал " Теги ", чтобы отметить некоторые важные " контрольные точки " разработки, т.е. когда я закончил версию программного обеспечения (альфа, бета), я создал тег...
5376 просмотров
schedule 05.07.2023

Spark Streaming — проблема с CheckPointing
я сделал потоковую передачу в твиттере, используя потоковый пользовательский API твиттера и потоковую передачу искры. это успешно работает на моей локальной машине. но когда я запускаю эту программу на кластере в локальном режиме. он просто успешно...
800 просмотров

Автоматический простой HTML DOM с Check Point
Добрый вечер, Я хотел задать вопрос, который я не уверен, что это можно сделать. У меня есть программа очистки, созданная с помощью Simple HTML DOM. Программа извлекает данные с различных веб-сайтов. Итак, мой вопрос: Можно ли...
43 просмотров

Контрольная точка не работает в искровом потоке
Мы помещаем файл данных в путь HDFS, который отслеживается приложением потоковой передачи искры. И приложение Spark Streaming отправляет данные в тему kafka. Мы останавливаем потоковое приложение? Между ними и снова запускаем, так что оно должно...
447 просмотров

Интервал между контрольными точками в tensorflow
Как указать интервал между двумя последовательными контрольными точками в тензорном потоке? В tf.train.Saver нет опций, чтобы указать это. Каждый раз, когда я запускаю модель с другим количеством глобальных шагов, я получаю новый интервал между...
2938 просмотров
schedule 04.06.2023

восстановление модели Tensorflow: не удается найти гамму / масштаб для слоев batch_norm в файле контрольной точки
Я могу восстановить модель и извлечь параметры для слоев weights, biases и batch_norm из файлов контрольных точек. Однако для нескольких файлов контрольных точек (начальных моделей и т. Д.) Я не могу найти коэффициент масштабирования / гамма слоя BN....
1052 просмотров

Как извлечь веса и смещения в модели воды, если для аргумента export_weights_and_bias задано значение FALSE?
У меня есть модель углубленного изучения воды, «модель1», которая очень хорошо обобщает. К сожалению, я забыл установить веса и смещения экспорта = TRUE при построении модели. Я попытался переобучить множество моделей со всеми точными...
286 просмотров
schedule 28.05.2022

Tensorflow: как конвертировать файлы моделей .meta, .data и .index в один файл graph.pb
В тензорном потоке обучение с нуля сформировало следующие 6 файлов: events.out.tfevents.1503494436.06L7-BRM738 model.ckpt-22480.meta контрольно-пропускной пункт model.ckpt-22480.data-00000-of-00001 model.ckpt-22480.index...
41048 просмотров
schedule 29.05.2024

установка расширителя сети ssl на контрольной точке mac os safari
SSL Network Extender не запускается. запуск SSL Network Extender завершается с ошибкой « не удалось загрузить » в Safari. Я думаю, что есть решение, но они не делятся им публично. У кого-нибудь есть решение для этого? В пользовательском...
3860 просмотров
schedule 08.10.2022

keras не загружает модель и вес при использовании контрольной точки
Я использую keras для создания глубокого автоэнкодера. Я использовал его контрольную точку для загрузки модели и весов, но результат всегда None , что, я думаю, означает, что контрольная точка работает неправильно и не сохраняет веса. Вот код, как...
2245 просмотров

Как правильно возобновить обучение сети из файла контрольной точки tensorflow?
Я изо всех сил пытаюсь восстановить модель в течение одного дня без каких-либо успехов. Мой код состоит из class TF_MLPRegressor() , где я определяю сетевую архитектуру в конструкторе. Затем я вызываю функцию fit() для обучения. Вот как я...
814 просмотров

Итеративная искра с кэшированием заканчивается памятью
У меня есть крошечный кадр данных pyspark с отношениями и функцией, которая вычисляет транзитивное закрытие. Я уже знаю несколько способов улучшить функцию (включая избавление от groupBy ), но давайте придерживаться этого. Когда я итеративно...
386 просмотров

Триггер активности вызывается дважды в оркестраторе
У нас есть оркестратор, который вызывается триггером таймера каждую минуту. В оркестраторе есть несколько триггеров действий, вызываемых в механизме цепочки функций. Однако был один случай, когда каждый триггер активности вызывался дважды с разницей...
575 просмотров

Как сохранить модель Tensorflow 2.0, которая использует модель из контрольной точки .meta из Tensorflow 1.xx как часть?
У меня есть модель, обученная с помощью tensorflow 1.15 и сохраненная как контрольная точка (с файлами .meta , .index и .data ). Что мне нужно, так это добавить несколько дополнительных операций в начало и в конец этого графа. Некоторые из...
1466 просмотров

Размер контрольных точек Flink превышает 20 ГБ, а время контрольных точек занимает более 1 минуты.
В первую очередь: Я как бы новичок в Flink (понимаю принцип и могу создать любую базовую потоковую работу, которая мне нужна) Я использую Kinesis Analytics для запуска своего задания Flink, и по умолчанию он использует инкрементную контрольную...
104 просмотров

Jinja2 Filter - фильтровать и выводить результат только при изменении файла
Я работаю с Ansible Core, я хочу применять фильтр только при изменении задачи в командной строке. Вот мой playbook.yml --- - name: Global Objects hosts: check_point connection: httpapi gather_facts: False vars_files: -...
52 просмотров
schedule 20.12.2022

Почему flink не может восстановиться из точки сохранения
версия flink 1.7 Я пытаюсь восстановить задание flink из точки сохранения (или контрольной точки), то что делает задание, это чтение из kafka - ›выполнение агрегации 30-минутного окна (как счетчик) -› погружение в kafka. Я использую RockDB и...
63 просмотров
schedule 11.05.2023