Вопросы по теме 'parallel-processing'
Как EJB может распараллелить длительный процесс с интенсивной загрузкой процессора?
Приложение имеет длительный процесс, интенсивно использующий ЦП, который в настоящее время выполняется на одном сервере (метод EJB) последовательно, когда клиент запрашивает его.
Теоретически возможно (с концептуальной точки зрения) разделить этот...
16.12.2023
Шаблон проектирования параллельного обратного вызова nodejs
Я пытаюсь найти хороший шаблон для выполнения кучи параллельных задач.
Позвольте мне сформулировать задачу, чтобы проиллюстрировать это. Задачи a, b, c, d, e, f, g выполняются как a(function(er, ra){//task a returned, ra is result}) , так что...
12.11.2023
Как контролировать параллелизм в параллельной коллекции scala
Начиная с версии 2.9, мы можем создать параллельную коллекцию одним методом par . Это легко и просто, но как контролировать параллелизм для параллельной коллекции?
27.10.2023
почему классические asp-скрипты или запросы выполняются последовательно для каждого клиента
Я замечал это много раз, и я не знаю, почему это работает так
для этого примера: все написано на asp, включена буферизация, IIS 7, сервер операторского класса, полная оперативная память и процессор
Как видно по захвату, сначала выполняется...
23.01.2024
Заставьте ведомые устройства ждать MPI_Bcast от ведущего.
Я пытаюсь написать параллельную программу, которая реализует конвейерную версию исключения Гаусса, используя язык MPI и C...
Однако я сталкиваюсь с некоторыми трудностями в начале реализации кода....
Я использую корневой процесс для чтения...
17.12.2023
GNU Parallel запускает код с несколькими вариантами
Должен признаться, что я читал документацию gnu parallel и не мог найти то, что искал. Мне нужно запустить код, который имеет несколько опций. Код требует больших математических вычислений и занимает до 5 дней на компьютере с частотой 3 ГГц,...
13.01.2024
Реализация Max Reduce в Cuda
Я изучаю Cuda и все еще справляюсь с параллелизмом. Проблема, с которой я сталкиваюсь на данный момент, заключается в реализации максимального уменьшения массива значений. это мое ядро
__global__ void max_reduce(const float* const d_array,...
16.12.2023
Юлия параллельные вычисления в IPython Jupyter
Я готовлю небольшую презентацию на Ipython, где хочу показать, насколько просто выполнять параллельные операции в Julia.
Это в основном расчет Монте-Карло Пи, описанный здесь
Проблема в том, что я не могу заставить его работать параллельно...
02.12.2023
Параллельная/многоядерная обработка в R для целочисленной программы?
Существуют ли какие-либо пакеты, специально предназначенные для ускорения работы R за счет параллельных вычислений? Я сделал очень большой IP-адрес, который должен работать какое-то время, поэтому мне было интересно, есть ли в R специальный пакет,...
12.12.2023
Почему Spark не перераспределяет задачи между исполнителями?
Я запускаю искровую работу, которая завершена на 99%. Последний 1% занимает много времени, поэтому я проверил трекер вакансий. Как показано на скриншоте, мы видим, что у некоторых исполнителей все еще есть несколько активных задач, а у некоторых нет...
12.01.2024
Распараллелить цикл MATLAB for для вычисления MLE
Я пытаюсь ускорить свой код MATLAB с помощью parfor , однако делаю это неправильно. Мой код довольно прост, я подгоняю некоторые данные, используя встроенную функцию MATLAB mle , используя различные начальные предположения для среднего ( mm ) и...
24.01.2024
Эффективный способ преобразования изображения, хранящегося в виде массива numpy, в hsv
Я делаю некоторый анализ данных изображений. Для некоторого анализа я хотел бы преобразовать пиксели изображения в HSV из RGB, в котором они изначально хранятся.
На данный момент я использую этот код:
def generate_hsv(im):
coords =...
06.12.2023
OpenMP: как скопировать обратно значение переменной firstprivate обратно в глобальную
Я новичок в OpenMP, и я застрял в базовой операции. Вот пример кода для моего вопроса.
#include <omp.h>
int main(void)
{
int A[16] = {1,2,3,4,5 ...... 16};
#pragma omp parallel for firstprivate(A)
for(int i = 0; i < 4; i++)
{...
04.12.2023
Значение inter_op_parallelism_threads и intra_op_parallelism_threads
Может кто-нибудь объяснить следующие термины TensorFlow
inter_op_parallelism_threads
intra_op_parallelism_threads
или, пожалуйста, дайте ссылки на нужный источник объяснения.
Я провел несколько тестов, изменив параметры, но...
29.12.2023
Как запустить первые три метода с @Test в последовательном порядке и следующие три метода с @Test параллельно, используя TestNG?
Существует 6 методов с аннотациями @Test (TestNG). Я хочу запустить первые три метода с @Test в последовательном порядке, а следующие три метода с @Test параллельно, используя TestNG. Как я могу этого добиться?
Ниже приведен фрагмент кода:...
25.11.2023
Запускайте параллельные этапы Jenkins на разных узлах, используя декларативный синтаксис.
Удалось успешно запустить интеграционные тесты параллельно на одном узле, и теперь я хотел бы распределить их по разным узлам. В приведенном ниже примере я хочу, чтобы этапы IT 1 и IT 2 выполнялись на разных узлах, а IT 3 выполнялся на исходном...
31.12.2023
Параллельное выполнение с использованием OpenMP занимает больше времени, чем последовательное выполнение c ++, правильно ли я рассчитываю время выполнения?
Без использования директив Open MP - последовательное выполнение - см. снимок экрана здесь
Использование директив OpenMp - параллельное выполнение - см. снимок экрана здесь
#include "stdafx.h"
#include <omp.h>
#include...
22.11.2023
Реализованы ли уже параллельные алгоритмы C ++ 17?
Я пытался поиграть с новыми функциями параллельной библиотеки, предложенными в стандарте C ++ 17, но не смог заставить его работать. Я пробовал компилировать с последними версиями g++ 8.1.1 , clang++-6.0 и -std=c++17 , но, похоже, ни одна из них...
20.12.2023
Параллельная обработка с пулом в Python
Я попытался запустить параллельную обработку локально определенной функции следующим образом:
import multiprocessing as mp
import numpy as np
import...
31.12.2023
Как запустить длительный параллельный процесс в R, который запускает R-скрипт?
У меня есть блестящее приложение, которое собирает некоторые параметры от пользователей, которые затем будут использоваться для запуска симуляции, что занимает много времени ~ 1-3 дня. Итак, я хочу, чтобы у пользователя была возможность проверить,...
07.11.2023
Новые материалы
Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..
Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально
Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..
Частный метод Python: улучшение инкапсуляции и безопасности
Введение
Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..
Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования
Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..
Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv)
Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..
Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..
Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..