0
ответов

Как планировщик ОС восстанавливает контроль над ЦП?

Недавно я начал изучать, как работает ЦП и операционная система, и меня немного смущает работа машины с одним ЦП -и операционной системой, обеспечивающей многозадачность. Таким образом,...
вопрос задан: 14 August 2018 08:31
0
ответов

Сегмент разделяемой памяти: как изменить размер?

В настоящее время я реализую связь между двумя кодами и чтобы обеспечить связь между ними, я создал сегмент разделяемой памяти, который синхронизируется с помощью семафоров. Моя проблема - это ...
вопрос задан: 13 July 2018 14:00
0
ответов

Недемонический пул процессов Python?

Можно ли создать недемонический пул Python? Я хочу, чтобы пул мог вызывать функцию, внутри которой есть другой пул. Я хочу этого, потому что процессы deamon не могут создать процесс ....
вопрос задан: 11 July 2018 19:45
0
ответов

Как устранить ошибку «AttributeError: __exit__» при многопроцессорной обработке в Python?

Я попытался переписать код для чтения csv на иметь возможность запускать его на нескольких ядрах в Python 3.2.2. Я попытался использовать многопроцессорный объект Pool, который я адаптировал из рабочих примеров (и уже ...
вопрос задан: 7 July 2018 17:39
0
ответов

Python многопроцессорный pool.map для нескольких аргументов

В многопроцессорной библиотеке Python есть вариант pool.map, который поддерживает несколько аргументов? text = "test" def harvester (text, case): X = case [0] text + str (X) если __name__ == '...
вопрос задан: 16 April 2018 13:47
0
ответов

Многопроцессорное профилирование Python

Я пытаюсь понять, как профилировать простой многопроцессорный скрипт python import multiprocessing импорт cProfile время импорта def worker(num): time.sleep(3) print 'Worker:', num if ...
вопрос задан: 21 March 2018 11:23
0
ответов

пул python apply_async и map_async не блокирует полную очередь

Я новичок в python. Я использую многопроцессорный модуль для чтения строк текста на стандартном вводе, каким-то образом преобразовываю их и записываю в базу данных. Вот фрагмент моего кода: batch = ...
вопрос задан: 16 March 2018 08:15
0
ответов

Как синглтон-бин обслуживает параллельный запрос?

У меня есть вопрос, касающийся того, как одноэлементные бины обрабатывают параллельные запросы подробно Я искал на StackOverflow по этому вопросу. Это пример ссылки из stackoverflow, но я нашел ...
вопрос задан: 10 March 2018 03:53
0
ответов

Использование 100% всех ядер с модулем многопроцессорности

У меня есть два фрагмента кода, которые я использую, чтобы узнать о многопроцессорности в Python 3.1.Моя цель - использовать 100% всех доступных процессоров. Однако фрагменты кода здесь достигают только 30% - 50% на ...
вопрос задан: 27 January 2018 22:46
0
ответов

Использовать массив numpy в общей памяти для многопроцессорной обработки

Я хотел бы использовать массив numpy в общей памяти для использования с модулем многопроцессорности. Сложность заключается в использовании его как массива numpy, а не только как массива ctypes. from multiprocessing import ...
вопрос задан: 11 January 2018 07:34
0
ответов

Безопасно, чтобы несколько процессов одновременно записывали в один файл? [CentOs 6, ext4]

Я создаю систему, в которой несколько подчиненных процессов взаимодействуют через сокеты домена unix и одновременно записывают в один и тот же файл. Я никогда не изучал файловые системы или это ...
вопрос задан: 8 December 2017 01:03
0
ответов

multiprocessing.Pool: Когда использовать apply, apply_async или map?

Я не видел четких примеров с вариантами использования для Pool.apply, Pool.apply_async и Pool.map. Я в основном использую Pool.map; каковы преимущества других?
вопрос задан: 19 October 2017 07:01
0
ответов

Объекты с общей памятью в многопроцессорной обработке

Предположим, у меня есть большой массив памяти, У меня есть функция func, которая принимает этот гигантский массив в качестве входных данных (вместе с некоторыми другими параметрами). func с разными параметрами может быть запущен в ...
вопрос задан: 11 August 2017 14:58
0
ответов

Копируются ли совместно используемые данные только для чтения в разные процессы для многопроцессорной обработки?

Имеющийся у меня фрагмент кода выглядит примерно так: glbl_array = # массив 3 Гб def my_func ( args, def_param = glbl_array): # do stuff на args и def_param if __name__ == '__main__': ...
вопрос задан: 11 August 2017 05:02
0
ответов

Проблемы классификации изображений в реальном времени в Python с помощью нейронных сетей

Я пытаюсь использовать caffe и python для классификации изображений в реальном времени. Я использую OpenCV для потоковой передачи с моей веб-камеры в одном процессе и в отдельном процессе, используя caffe для выполнения изображения ...
вопрос задан: 24 May 2017 05:47
0
ответов

Поймайте Ctrl+C / SIGINT и изящно завершите многопроцессорность в python

Как мне поймать Ctrl + C в многопроцессорной программе Python и изящно выйти из всех процессов, мне нужно решение для работы как в Unix, так и в Windows. Я пробовал следующий :многопроцессорный импорт импорт...
вопрос задан: 23 May 2017 12:34
0
ответов

Выполнить цикл for -параллельно в Python 3.2 [дубликат]

Возможный дубликат :как распараллелить простой цикл Python? Я новичок в Python (, использую Python 3.2 ), и у меня есть вопрос о распараллеливании. У меня есть цикл for -, который я хочу...
вопрос задан: 23 May 2017 12:34
0
ответов

Django Celery: выполнение только одного экземпляра длительного процесса

У меня есть длительный процесс, который должен запускаться каждые пять минут, но более одного экземпляра процессов никогда не должны запускаться одновременно. Обычно процесс не должен выполняться дольше пяти минут, но я ...
вопрос задан: 23 May 2017 12:30
0
ответов

асинхронный вызов в приложении GUI с использованием многопроцессора

У меня есть приложение GUI, которое необходимо для привлечения и разбора разнообразных ресурсов из сети рядом с главным циклом GUI. Я искал опции, используя многопроцентный модуль Python Multipressing с тех пор ...
вопрос задан: 23 May 2017 12:29
0
ответов

Использование многопроцессорной обработки внутри декоратора приводит к ошибке: не удается обработать функцию… она не найдена как

Я столкнулся с проблемой, которую я не могу решить, и она связана с многопроцессорностью, и я использую ее внутри декоратора. Когда я вызываю метод run_in_parallels, используя многопроцессорность, я получаю ...
вопрос задан: 23 May 2017 12:17
0
ответов

PicklingError при использовании многопроцессорной обработки

У меня возникли проблемы при использовании Pool.map_async () (а также Pool.map ()) в модуле многопроцессорности. Я реализовал функцию параллельного цикла, которая отлично работает, пока функция input ...
вопрос задан: 23 May 2017 12:16
0
ответов

Глобальные переменные и многопроцессорность Python [дубликат]

Возможный дубликат: обновления глобальных переменных многопроцессорной обработки Python не возвращаются родительскому Я использую компьютер со многими ядрами, и для повышения производительности мне действительно следует использовать более одного. ...
вопрос задан: 23 May 2017 12:02
0
ответов

Зависание сценария Python с использованием SQLAlchemy и многопроцессорности

Рассмотрим следующий сценарий Python, который использует SQLAlchemy и модуль многопроцессорности Python. Это с Python 2.6.6-8 + b1 (по умолчанию) и SQLAlchemy 0.6.3-3 (по умолчанию) в сжатии Debian. Это ...
вопрос задан: 23 May 2017 12:01
0
ответов

крутится несовместимость с многопроцессорностью событий и очередей?

Я пытаюсь смоделировать сеть приложений, работающих с использованием Twisted.В рамках моего моделирования я хотел бы синхронизировать определенные события и иметь возможность передавать каждому процессу большие объемы данных....
вопрос задан: 23 May 2017 12:00
0
ответов

Обработка проблемы травления classmethod с помощью copy_reg

Я обнаружил ошибку травления при работе с многопроцессорной обработкой: из многопроцессорной обработки импорта Pool def test_func (x): return x ** 2 class Test: @classmethod def func (cls, x): return ...
вопрос задан: 23 May 2017 11:52
0
ответов

Использование модуля Python Multiprocessing для выполнения одновременных и отдельных прогонов модели SEAWAT/MODFLOW

Я пытаюсь выполнить 100 прогонов модели на своем 8-процессорном 64-разрядном компьютере с Windows 7. Я хотел бы запустить 7 экземпляров модели одновременно, чтобы уменьшить общее время выполнения (примерно 9,5 мин на запуск модели). Я'...
вопрос задан: 23 May 2017 11:46
0
ответов

Предоставление доступа к общей памяти после того, как дочерние процессы уже запущены

Как предоставить дочерним процессам доступ к данным в общей памяти, если данные доступны только после того, как дочерние процессы были созданы (с использованием multiprocessing.Process)? Я знаю многопроцессорности ....
вопрос задан: 23 May 2017 11:45
0
ответов

Альтернативные шаблоны использования для многопроцессорной обработки Python, позволяющие избежать распространения глобального состояния?

Этот (чрезвычайно упрощенный пример)отлично работает (Python 2.6.6, Debian Squeeze):из пула многопроцессорного импорта import numpy as np src=None def process(row):return np.sum(src[row])def main()...
вопрос задан: 23 May 2017 10:34
0
ответов

Настройка экземпляров EC2 в качестве Celery Workers с локальным компьютером в качестве хоста

Как и в моем вопросе, я пытаюсь настроить несколько экземпляров amazon EC2 для выполнения некоторой многопроцессорной обработки. Я думал об использовании сельдерея для управления рабочими. Кто-нибудь заставил сельдерей работать на EC2 ...
вопрос задан: 23 May 2017 10:33
0
ответов

Ошибка тайм-аута python socket.connect в многопоточном или многопроцессорном режиме

Как и в следующем примере, я хотел бы взаимодействовать со многими ПК в определенном диапазоне IP-адресов. Мой компьютер --- + ------> Клиент A ПК + ------> Клиент B ПК + ------> Клиент C ПК ............
вопрос задан: 23 May 2017 10:32