Python song song cho vòng lặp = asyncio

Song song hóa vòng lặp có nghĩa là trải rộng tất cả các quy trình song song bằng cách sử dụng nhiều lõi. Khi chúng tôi có nhiều công việc, mỗi tính toán không đợi công việc trước đó xử lý song song hoàn thành. Thay vào đó, nó sử dụng một bộ xử lý khác để hoàn thành

Trong bài viết này, chúng ta sẽ song song hóa một vòng lặp for trong Python

Sử dụng Mô-đun multiprocessing để song song hóa vòng lặp for trong Python

Để song song hóa vòng lặp, chúng ta có thể sử dụng gói multiprocessing trong Python vì nó hỗ trợ tạo một quy trình con theo yêu cầu của một quy trình đang diễn ra khác

Mô-đun multiprocessing có thể được sử dụng thay vì vòng lặp for để thực thi các thao tác trên mọi phần tử của iterable. Đó là đối tượng

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

Ví dụ,

import multiprocessing

def sumall[value]:
    return sum[range[1, value + 1]]

pool_obj = multiprocessing.Pool[]

answer = pool_obj.map[sumall,range[0,5]]
print[answer]

đầu ra

Sử dụng Mô-đun

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

1 để song song hóa vòng lặp for trong Python

Mô-đun

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

Để thực hiện xử lý song song, chúng tôi phải đặt số lượng công việc và số lượng công việc được giới hạn ở số lượng lõi trong CPU hoặc số lượng có sẵn hoặc không hoạt động tại thời điểm này

Hàm

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

Hàm

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

Chúng ta cần tạo một danh sách để thực thi mã. Sau đó, danh sách được chuyển sang song song, phát triển hai luồng và phân phối danh sách nhiệm vụ cho chúng

Xem mã dưới đây

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

đầu ra

[1.0,
 0.0,
 1.0,
 1.0,
 1.0,
 1.4142135623730951,
 1.0,
 1.7320508075688772,
 1.0,
 2.0]

Sử dụng Mô-đun

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

7 để song song hóa vòng lặp for trong Python

Mô-đun

from joblib import Parallel, delayed
import math

def sqrt_func[i, j]:
    time.sleep[1]
    return math.sqrt[i**j]

Parallel[n_jobs=2][delayed[sqrt_func][i, j] for i in range[5] for j in range[2]]

[1.0,
 0.0,
 1.0,
 1.0,
 1.0,
 1.4142135623730951,
 1.0,
 1.7320508075688772,
 1.0,
 2.0]

[1.0,
 0.0,
 1.0,
 1.0,
 1.0,
 1.4142135623730951,
 1.0,
 1.7320508075688772,
 1.0,
 2.0]

Đoạn mã dưới đây sẽ thực thi song song khi nó được gọi mà không ảnh hưởng đến chức năng chính để chờ. Vòng lặp cũng chạy song song với hàm main

Các vòng lặp song song của Python giúp trải rộng các quy trình song song bằng cách sử dụng nhiều lõi. Khi có nhiều công việc, xử lý song song sử dụng các bộ xử lý khác nhau mà không cần chờ hoàn thành công việc trước đó

import multiprocessing
def printVal[value]:
    return ["hello "*[value]]
pool_obj = multiprocessing.Pool[]
ans = pool_obj.map[printVal,range[0,4]]
print[ans]
pool_obj.close[]
đầu ra
['', 'hello ', 'hello hello ', 'hello hello hello ']

import joblib
import math
def multiple_of_six[i]:
    return [i*6]
print[joblib.Parallel[n_jobs=2][joblib.delayed[multiple_of_six][i] for i in range[5]]]
đầu ra