1
ответ

распараллеливать цикл for for Python 3

Я пытаюсь сделать некоторый анализ спутниковых данных MODIS. Мой код в основном читает много файлов (806) размером 1200 на 1200 (806 * 1200 * 1200). Он делает это с помощью цикла for и выполняет ...
вопрос задан: 13 July 2018 12:59
1
ответ

python подклассификация multiprocessing.Process

Я новичок в объектно-ориентированном python, и я переписываю свое существующее приложение в объектно-ориентированную версию, потому что сейчас разработчиков становится все больше, и мой код становится не обслуживаемым. Обычно я ...
вопрос задан: 25 January 2017 22:01
1
ответ

многопроцессор python (ThreadPool), занимающий больше времени, чем последовательный [дубликат]

Я новичок в многопроцессорном модуле в python. У меня есть тестовый код, ниже которого вычисляется время, необходимое для выполнения функции как в последовательной форме, так и в пуле потоков: \ from ...
вопрос задан: 25 January 2017 06:04
1
ответ

Дамп многопроцессорной обработки. Очередь в список

Я хочу вывести многопроцессорную обработку. Очередь в список. Для той задачи я записал следующую функцию: импортируйте определение Очереди dump_queue (очередь): """ Порожняя тара все незаконченные объекты в очереди и...
вопрос задан: 6 April 2016 14:37
1
ответ

Передача нескольких итераций в многопроцессорную систему pool.map [duplicate]

У меня есть следующая функция (some_function), которую я передаю в pool.map. Код работает, но он значительно медленнее, чем последовательная обработка. Следует отметить, что у меня есть 4 миллиона сгруппированных объектов, таким образом ...
вопрос задан: 28 January 2016 13:54
1
ответ

создавать объекты с использованием многопроцессорного пула в python 3.6 [duplicate]

Я пытаюсь использовать многопроцессорный пул, чтобы создать список объектов, минималистический пример ниже: import multiprocessing как mp class MyClass: Count = 0 def __init __ (self, num): ...
вопрос задан: 12 September 2015 00:28
1
ответ

Выход из многопроцессорного Python Элегантно Как?

импорт многопроцессорных классов времени импорта testM (multiprocessing.Process): def __init __ (self): multiprocessing.Process .__ init __ (self) self.exit = False def run (self): ...
вопрос задан: 10 December 2014 09:51
1
ответ

Никакая печать не производится от дочерней многопроцессорной обработки. Процесс, если программа не отказывает

Я испытываю затруднения из-за модуля многопроцессорной обработки Python. Я использую класс Процесса для порождения нового процесса для использования моего второго ядра. Этот второй процесс загружает набор данных в RAM...
вопрос задан: 5 May 2014 19:52
1
ответ

Python: Хорошее место для приобретения знаний о 'многопроцессорной обработке. Менеджер'? [закрытый]

Я хочу учиться использовать многопроцессорную обработку. Менеджер. Я посмотрел на документацию, но это не достаточно легко для меня. Кто-либо знает о хорошем учебном руководстве или чем-то как этот?
вопрос задан: 20 August 2013 12:47
1
ответ

С CUDA существует ли ограничение на количество вычислений или количество разрешенных блоков? [Дубликат]

Я изучаю CUDA 8.0 с Visual Studio 2015 (работает на GeForce GTX 1060). Я попытался установить 2000 блоков для запуска 1024 потоков каждый (значения, которые поддерживаются), но я получаю код ошибки 4 после ...
вопрос задан: 6 July 2013 11:07
1
ответ

multiprocessing.Pool example

Я пытаюсь научиться использовать многопроцессорность и нашел следующий пример. от времени импорта N = 10 К = 50 w = 0 def ...
вопрос задан: 5 July 2013 06:42
1
ответ

Доля возражает с атрибутом дескриптора файла между процессами

У меня есть вопрос о совместно используемом ресурсе с дескриптором файла между процессами. Вот мой тестовый код: от многопроцессорного Процесса импорта, Блокировки, freeze_support, импорт tempfile #from cStringIO импорта Очереди...
вопрос задан: 15 February 2013 17:10
1
ответ

многопроцессорная обработка с большими данными

Я использую multiprocessing.Pool () для распараллеливания некоторых тяжелых вычислений. Функция target возвращает много данных (огромный список). У меня заканчивается ОЗУ. Без многопроцессорности я бы просто поменял ...
вопрос задан: 3 February 2013 21:02
1
ответ

Использование верхней памяти только, когда многопроцессорная обработка

Я пытаюсь пользоваться многопроцессорной библиотекой Python для обнадеживающего получения некоторой производительности. Конкретно я использую его функцию карты. Теперь, по некоторым причинам когда я выгружаю его с его обработанным синглом...
вопрос задан: 27 August 2012 11:46
1
ответ

Проблема со статусом задания Gearman

У меня есть сервер Gearman, на котором выполняется процесс, завершение которого занимает несколько минут. Я запускаю индикатор выполнения, чтобы показать завершение, и пытаюсь получить процентное значение для индикатора с помощью Gearman PHP ...
вопрос задан: 14 April 2011 16:40
1
ответ

Могу ли я использовать многопроцессорную очередь в функции, называемой by Pool.imap?

Я использую python 2.7, и пытается запускать некоторые тяжелые задачи ЦП в своих собственных процессах. Я хотел бы иметь возможность отправлять сообщения обратно родительскому процессу, чтобы информировать его о текущем состоянии ...
вопрос задан: 31 March 2011 18:18
1
ответ

Python Multiprocessing.Pool lazy iteration

Мне интересно, как класс Python Multiprocessing.Pool работает с map, imap и map_async. Моя конкретная проблема заключается в том, что я хочу отобразить на итераторе, который создает объекты с большим объемом памяти ...
вопрос задан: 15 March 2011 22:39
1
ответ

Как передать дескрипторы файлов от родителя до ребенка в Python?

Я использую многопроцессорный модуль и использую пулы для запуска нескольких рабочих. Но дескрипторы файлов, которые открыты при родительском процессе, закрываются в рабочих процессах. Я хочу, чтобы они были открыты....
вопрос задан: 7 June 2010 13:17
1
ответ

Как выбрать chunksize для многопроцессорной обработки Python с большими наборами данных

Я пытаюсь для использования Python для получения некоторой производительности на задаче, которая может быть высоко параллелизирована с помощью http://docs.python.org/library/multiprocessing. При рассмотрении их библиотеки они говорят для использования...
вопрос задан: 24 April 2010 20:09
1
ответ

Процесс Python не назовет atexit

Я пытаюсь использовать atexit в Процессе, но к сожалению это, кажется, не работает. Вот некоторый пример кода: время импорта импортирует импорт atexit, регистрирующий многопроцессорную обработку импорта logging.basicConfig (уровень =...
вопрос задан: 30 March 2010 20:16
1
ответ

Многопоточность Ruby / многопроцессорные чтения

Кто-либо может рекомендовать какую-либо хорошую многопоточность / обрабатывающие книги / сайты, которые вдаются в подробности о запутанности многопоточности Ruby / многопроцессорная обработка? Я пытался использовать рубиновую поточную обработку и в основн
вопрос задан: 5 March 2010 22:35
1
ответ

Что лучший способ состоит в том, чтобы получить stacktrace при использовании многопроцессорной обработки?

Я задаюсь вопросом о лучшем способе получить stacktrace, когда существует исключение в функции, выполняемой через многопроцессорный модуль. Вот пример: импортируйте многопроцессорный квадрат определения (x):...
вопрос задан: 20 January 2010 14:01
1
ответ

Выполнение кода другого процессора (x86 блок)

В реальном режиме на x86, какие инструкции должны были бы использоваться для выполнения кода другого процессора в многопроцессорной системе? (Я пишу некоторый предварительный загрузочный код в ассемблере, который должен установить...
вопрос задан: 26 October 2009 11:50
1
ответ

Python 2.6 отправляет объект соединения по Очереди / Канал / и т.д.

Учитывая эту ошибку (Выпуск 4892 Python), который дает начало следующей ошибке:>>> импортируют многопроцессорную обработку>>> многопроцессорная обработка allow_connection_pickling ()>>> q =...
вопрос задан: 23 September 2009 20:08
1
ответ

Профилирование пула многопроцессорной обработки Python

Я пытаюсь выполнить cProfile.runctx () на каждом процессе в многопроцессорном пуле, понять то, что многопроцессорные узкие места находятся в моем источнике. Вот упрощенный пример того, что я пробую...
вопрос задан: 12 September 2009 10:41
1
ответ

Как можно представить параллелизированный сценарий Python?

Предположим, что у меня есть сценарий Python, названный my_parallel_script.py, который включает многопроцессорную обработку использования для параллелизации нескольких вещей, и я выполняю его со следующей командой: python-m cProfile...
вопрос задан: 11 September 2009 00:15
1
ответ

примите () с сокетами, совместно использованными несколькими процессами (на основе предварительного разветвления Apache)

Я работаю над некоторым кодом Python, смоделированным на сервере Apache перед ветвлением MPM. Я - больше программист приложений, чем сетевой программист, и это были 10 лет, с тех пор как я считал Stevens, таким образом, я пытаюсь добраться...
вопрос задан: 18 August 2009 12:55
1
ответ

Многопроцессорная обработка Python простой способ реализовать простой счетчик?

Эй все, я использую многопроцессорную обработку в Python теперь. и я просто задаюсь вопросом, существует ли там своего рода простая переменная счетчика, что каждый процесс, когда они сделаны, обработав некоторую задачу...
вопрос задан: 5 August 2009 13:19
0
ответов

Как изолировать ненадежный собственный код в Java?

У меня есть часть библиотеки C, которой я не доверяю (в том смысле, что она может дать сбой часто). Я вызываю это из процесса Java. Чтобы предотвратить сбой в библиотеке C, в которой все приложение Java. ...
вопрос задан: 22 August 2019 19:11
0
ответов

многопроцессорные обновления глобальных переменных не возвращаются родительскому

Я пытаюсь вернуть значения из подпроцессов, но эти значения, к сожалению, невозможно подобрать. Итак, я успешно использовал глобальные переменные в модуле потоков, но не смог получить выполненные обновления...
вопрос задан: 5 July 2019 23:21