Вопросы с меткой [распараллеливание]
Руководство по использованию метки распараллеливание отсутствует.
91
вопрос
3
голоса
2ответа
68 показов
Параллельные вычисления в Python
Пытаюсь написать код, который при получении новой строки через requests будет вызывать функцию get_value() отдельным процессом. Т.к. поток, получаемый через requests бывает довольно большой, и тогда ...
2
голоса
1ответ
39 показов
Ускорение применения скалярной (невекторизированной) функции к объекту pandas.Series / pandas.DataFrame
Отвечая на этот вопрос, я задумался о том как можно ускорить обработку данных, представленных в виде Pandas Series/DataFrame, при помощи невекторизированной функции, которую мы, к тому же, не можем ...
3
голоса
1ответ
126 показов
Многократное распараллеливание коротких вычислений
Задача: необходимо распараллеливать вычисление нескольких моделей N времени (N последовательных итераций). Модель за 1 раз выполняет короткое вычисление численным методом (Эйлером / Рунге-Куттом или ...
1
голос
0ответов
41 показ
Как можно усыплять и будить потоки в си pthread
Я хочу сделать так, чтоб поток, доходя до определенного места засыпал, и когда все остальные потоки доходили до этого же места, все потоки просыпались и продолжали выполнение. Как это можно ...
0
голосов
0ответов
25 показов
Вопрос по параллельной программе
Написал параллельную программу на с++ с использованием mpi. Но толком не понял почему она быстрее, чем с использованием open mp. Есть варианты почему? Связано ли это с тем, что программу с open mp я ...
0
голосов
0ответов
35 показов
Параллельные запросы с разных IP
Условно имеется 5 прокси и 50 ссылок.
Как сделать так, чтобы с каждого прокси параллельно был произведен парсинг ссылок по 10 для каждого.
подскажите, какие библиотеки может быть использовать
0
голосов
1ответ
66 показов
Нюансы в распараллеливании задачи по заполнению массива данными
В целях инспекции кода и познании большего в распараллеливании, перенёс ответ из () в этот вопрос.
Изначальный вопрос:
Есть обычный Windows Form's и огромные объемы данных,которые надо на него ...
1
голос
2ответа
64 показа
Эффективный алгоритм для асинхронного копирования папки
Часть моего проекта отвечает за копирование каталогов из одного места в другое. Сначала рекурсивно получаю список файлов в папке (отбрасывая файлы с исключениями), затем с этим списком работаю.
...
1
голос
0ответов
40 показов
По каким причинам поток не может быть создан?
Нужен теоретический ответ на то, по каким причинам при создании потока внутри программы, он не будет создан. То есть какие в теории могут произойти сбои и нарушения работы, в результате которых поток ...
0
голосов
0ответов
78 показов
С помощью Task расспараллелить операции над матрицей C#
Подскажите, пожалуйста, как с помощью класса Task реализовать параллельный алгоритм умножения матрицы на вектор?
То есть результат умножения строки на вектор никак не зависит от умножения предыдущих ...
0
голосов
1ответ
51 показ
Операция над файлами из очереди в нескольких потоках C#
Есть каталог с файлами, которые надо обработать.
Есть массив из 4х потоков.
Эти 4 потока должны обработать эти файлы.
Файлы у меня добавлены в очередь и должны выбираться из очереди и выполнятся ...
0
голосов
0ответов
41 показ
Как разбить “умножение матрицы на вектор” на параллельные участки кода
В общем, необходимо с помощью методов класса Parallel (и для другого варианта с помощью Task) реализовать параллельный алгоритм умножения матрицы на вектор.
Уважаемые форумчане, подкиньте, пожалуйста, ...
0
голосов
1ответ
135 показов
Golang. Как распараллелить обработку слайса, чтобы получить выигрышь в скорости?
Есть слайс, содержащий большое количество элементов, допустим 100000. Мне необходимо написать функцию, которая умножит каждый элемент данного слайcа на 2. Я хочу, чтобы эта функция работала ...
0
голосов
1ответ
143 показа
Неблокирующий параллельный алгоритм поиска максимума и его индекса
Существует ли неблокирующий параллельный алгоритм поиска максимального элемента массива а также его индекса? Есть такая реализация,
AtomicInteger atomicMin = new AtomicInteger(99999);
AtomicInteger ...
0
голосов
2ответа
111 показов
Python Multiprocessing - WinError 6 - The handle is invalid
Исключительно в целях самообразования пишу метод, занимающийся численными интегрированием, и делающий это распределенным образом.
Метод выглядит следующим образом:
from multiprocessing import ...
2
голоса
1ответ
47 показов
Как распаралелить pyfpgrowth?
Кто знает как распараллелить метод ассоциативных правил и можно ли это сделать?
pyfpgrowth.generate_association_rule()
В библиотеке pandarallel не нашла как это сделать.
1
голос
1ответ
117 показов
Как устроены алгоритмы вычисление матриц “matlab”?
Как устроены вычисления в matlab? В частности, как он работает с матрицами? Может ли кто-нибудь объяснить, или дать ссылки на соответствующую литературу?
Предыстория такова, что я на с++ создал класс ...
1
голос
1ответ
150 показов
Как правильно организовать многопроцессное приложение в Node.js?
Исходный код имеет следующий вид:
const listener = new Listener();
listener.start();
process.on('SIGTERM', () => {
listener.stop();
});
Нужно разделить Listener на два таким образом, чтобы ...
1
голос
0ответов
121 показ
Параллелизм в Haskell
Передо мной стоит задача следующего плана: Требуется написать код на Haskell для вычисления определенного интеграла с заданной точностью и с заданной степенью параллелизма.
Для реализации ...
0
голосов
0ответов
167 показов
Как запустить несколько Node.js-скриптов параллельно?
Например как запустить два Node.js-скрипта параллельно?
#!/bin/bash
node ./scriptOne.js
node ./scriptTwo.js
1
голос
0ответов
38 показов
Нужно распараллелить программу по стандарту OpenMP
Программа находит количество компонент связности графа при помощи DSU. Нужно распараллелить её на несколько ядер.
Есть идеи?
(Я понимаю, что возможно будет необходимо переписать некоторые функции с С++...
1
голос
0ответов
147 показов
Увеличение изображения с использованием многопоточности C#
Не могу разобраться, как сделать так, чтобы ускорить время выполнения программы при помощи параллельных вычислений на процессоре? Необходимо распараллелить метод ZoomPicture, так как при файлах с ...
1
голос
1ответ
351 показ
Не работает распараллеливание в OpenMP
Я написал простую программу для того, чтобы проверить, работает ли у меня распараллеливание OpenMp.В свойствах проекта я подключил поддержку OpenMp (C++\Язык\Поддежка OpenMp). В коде я указал ...
0
голосов
0ответов
151 показ
Как задействовать автоматическое распараллеливание в Visual Studio, используя Intel Compiler?
Я знаю, что это делается с помощью ключа /Qparallel, однако "распараллеливаться" не хочет. Даже пробовал приписывать #pragma parallel перед циклом((.
Вот код:
#include "pch.h"
#include <iostream&...
1
голос
0ответов
73 показа
Помогите разобраться с работой intrinsic функций в коде
На просторах интернета нашел реализацию клеточного автомата игра "Жизнь", ускоренную использованием intrinsic функций. Не могу понять что делает данный отрывок кода
void gameoflife8vec(uint8_t *...
3
голоса
1ответ
60 показов
При каких случаях могут быть S lock на page в БД?
При каких случаях могут быть S lock на page в БД?
Искал эту информацию, но ничего не видно. Только нашел на Table и Row
Какие вообще могут быть блокировки на page?
2
голоса
1ответ
175 показов
Выделение памяти на двойной указатель для матрицы в CUDA
Для того , чтобы распараллелить умножения матрицы я создал три матрицы:
int** a=NULL;//выделил памяти,заполнил случайными значениями
int** b=NULL;//выделил памяти,заполнил случайными значениями
int** ...
2
голоса
1ответ
166 показов
Как эффективно разделить задачу нахождения минимума и максимума между несколькими потоками. OpenMP
Попробовал осуществить попытку, но уже понял, что данная реализация только увеличивает время работы т.к. при каждом обращении к переменной min или max все потоки приостанавливают свое выполнение. ...
1
голос
0ответов
164 показа
Оптимизация перебора всех элементов Dictionary<T,T>
Есть класс мира, в котором находится словарик форм жизни.
Каждый Update в классе мира вызывается foreach, который перебирает все формы жизни и производит с ними некоторые действия(изменение полей ...
0
голосов
1ответ
1k показов
Ускорение парсинга данных aiohttp + async
Здравствуйтe, имеется код:
import asyncio
import aiohttp
import os
import time
import logging
import lxml.html
from lxml.cssselect import CSSSelector as cssselect
from bs4 import BeautifulSoup
log = ...
0
голосов
1ответ
41 показ
Как организовать параллельно выполняемые тесты в WebdriverIO?
В спецификации бегло упоминается ссылка на такой факт:
Возможно, вы уже поняли, что WebdriverIO создает для каждого
spec-файла (или feature-файла в cucumber) одну сессию Selenium. В
общем ...
1
голос
0ответов
55 показов
Параллезм/многопоточность/асинхронность [дубликат]
Прочитал разные источники, но не уверен, что все правильно понимаю:
Многопоточность - достигается путем выполнения различных кусков кода, где за счет высокой скорости(кусочек там, кусочек там) ...
0
голосов
1ответ
85 показов
python. Что использовать для изменения состояния объекта с клавиатуры?
Условия:
Есть объект, хранящий свое состояние. Одна ветвь программы проверяет состояние и в зависимости от него делает что-то, не важно что. Вторая ветвь должна ожидать ввод с клавиатуры, и на ...
0
голосов
0ответов
93 показа
Task.Run(): работа с разделяемыми ресурсами
Есть код
class Program
{
static void Main(string[] args)
{
string filePath = @"c:\test\test.txt";
string tempPath = Path.GetTempPath();
Task.WaitAll(Enumerable.Range(1,...
2
голоса
0ответов
81 показ
Как обеспечить параллельное выполнение рекурсивной функции используя Fork/Join Framework
Напишу сразу, что я новичок и ответ в итоге может находиться не в поле Fork/Join Framework.
Пишу программу, в которой требуется пройти по двумерному массиву, состоящему из нулей и единиц и определить ...
1
голос
1ответ
265 показов
MPI Создание коммуникаторов
Мне необходимо разделить процессы на несколько коммуникаторов. В один записать четные, а в другие нечетные. Написал код, но при выполнении сыпятся ошибки. Помогите разобраться в чем пробелема. Есть ...
0
голосов
1ответ
42 показа
Потоки в операционной системе
Помогите, пожалуйста вот такой вопрос какие есть три основных вида потоков: первый из них это мне сказали, что поток выполнения, а еще два которые есть?
2
голоса
1ответ
250 показов
Правильное распараллеливание с учетом логических процессоров CPU
К сожалению, понимание параллельного программирования и многопоточности, как и для многих других ко мне приходит только с опытом. Выполняя некий алгоритм по обработке презентации PowerPoint из 200 ...
0
голосов
0ответов
93 показа
Intel TBB. Распаралелливание вложенных циклов. Интеграл
Хочу распараллелить алгоритм нахождения интеграла с помощью tbb. Но похоже я что-то неправильно делаю. Функция IntegralTBB возвращает каждый раз новое значение, похоже гонка данных. Как исправить? ...
1
голос
0ответов
77 показов
Корректная реализация алгоритма поиска элемента в массиве с использованием CUDA
Доброго времени суток. Имеется следующая задача:
Имеется NUM_VALUE элементов (пусть они будут находиться в массиве
inArray типа int) и некий массив baseArray, состоящий из ARR_SIZE
элементов ...
3
голоса
1ответ
249 показов
Использование gpu на Android
Возможно ли на Android каким-либо образом напрямую задействовать GPU для каких-либо задач? И целесообразно ли это, то есть получится ли какой-то выигрыш в производительности при распараллеливании? Как ...
4
голоса
1ответ
56 показов
Распараллеливание обработки комбинаций
Моя программа генерирует 27 512 614 111 (27,5 миллиардов) комбинаций чисел.
Кажется, что нереально страшная цифра, но всё не так. Программа в чистом виде делает это за 10 мин на одном ядре. Однако мне ...
1
голос
1ответ
61 показ
Не получается запустить более 4 потоков URLDownloadToFile
Имеется такая функция, которая нужно выполнять одновременно в 100 потоков.
void tryURL()
{
randURL.clear();
for (unsigned short i = 0; i < urlLength; i++) {
randURL = randURL + ...
0
голосов
1ответ
126 показов
распараллеливание кода с генерацией перестановок в си, openmp
Доброго времени суток. Необходимо ускорить работу программы при больших значениях входных данных. Собственно сама задача: необходимо для каждой сгенерированной перестановки считать определённые ...
1
голос
0ответов
141 показ
Распараллеливание с помощью openmp. Нет прироста скорости.
Здравствуйте, вообщем пытаюсь использовать Openmp, чтобы распараллелить задачу вычисления экспоненты с помощью ряда Тейлора. Программа работает, но при сравнении времени выполнения последовательного ...
3
голоса
0ответов
213 показов
Параллельное программирование в андроид
В андроид есть поддержка c++, значит можно на базе андроид смартфонов организовывать параллельные вычисления на OpenMP? Есть ли такая поддержка в андроид или похожие библиотеки в Java для параллельных ...
0
голосов
0ответов
95 показов
Почему запросы в ASP.NET не выполняются параллельно?
В ASP .NET (C#) проекте столкнулся с такой проблемой, когда обрабатывается один запрос (там идет достаточно интенсивная и многопоточная работа с БД) я не могу открыть параллельно другую страницу, т.е. ...
1
голос
0ответов
414 показов
Вычислительный кластер на Android
Возможно ли создать что-то вроде вычислительного кластера, используя Android смартфоны? Т.е. по сути нужно объединить несколько смартфонов в одну сеть и заставить решать одну вычислительную задачу, ...
5
голосов
3ответа
187 показов
Параллелизм и сеть
Допустим, есть какая-то шара на которой лежат файлы мелкого размера(например, 500кб).
Собственно, вопрос, будет ли выигрыш в производительности если их скачивать параллельно имея широкий канал?
Или ...
1
голос
0ответов
54 показа
Нужен прокси-сервер с возможностью распараллеливания запросов на разные сервера
Подскажите, легкий прокси-сервер с возможностью распараллеливания запросов на разные сервера.