首頁 後端開發 Python教學 Python 中的進程管理:平行程式設計基礎

Python 中的進程管理:平行程式設計基礎

Jan 03, 2025 am 09:52 AM

Process Management in Python: Fundamentals of Parallel Programming

平行程式設計是一種程式設計模型,允許程式在多個處理器或核心上同時執行多個任務。該模型旨在更有效地使用處理器資源、減少處理時間並提高效能。

為了用圖像說明並行編程,我們可以想像我們遇到了一個問題。在開始並行處理之前,我們將這個問題分成更小的子部分。我們假設這些子部分彼此獨立且彼此不了解。每個子問題都轉換為更小的任務或指令。這些任務以適合併行工作的方式組織。例如,可以建立許多指令來對資料集執行相同的操作。然後這些任務被分配給不同的處理器。每個處理器獨立且並行地處理其分配的指令。這個過程顯著減少了總處理時間,使我們能夠更有效地使用資源。

Python 提供了多種用於平行程式設計的工具和模組。

**多處理
**它允許程式同時運行多個進程,從而利用真正的並行性。多處理模組克服了 GIL(全域解釋器鎖)的限制,允許在多核心處理器上實現全部效能。

全域解釋器鎖定(GIL)是流行的 Python 實作(稱為 CPython)中使用的一種機制。 GIL 一次只允許一個執行緒執行 Python 字節碼。當在 Python 中使用多執行緒時,這種結構會限制真正的並行性。

*平方和立方計算範例
*

from multiprocessing import Process

def print_square(numbers):
    for n in numbers:
        print(f"Square of {n} is {n * n}")

def print_cube(numbers):
    for n in numbers:
        print(f"Cube of {n} is {n * n * n}")

if __name__ == "__main__":
    numbers = [2, 3, 4, 5]  

    # İşlemler (processes) oluşturma
    process1 = Process(target=print_square, args=(numbers,))
    process2 = Process(target=print_cube, args=(numbers,))

    # İşlemleri başlatma
    process1.start()
    process2.start()

    # İşlemlerin tamamlanmasını bekleme
    process1.join()
    process2.join()

登入後複製
登入後複製
登入後複製

為什麼我們需要多重處理 我們可以用廚師和廚房的類比來解釋多重處理的需求。您可以將廚師獨自在廚房做飯視為單一進程程序。我們可以將其比作多處理,即多個廚師在同一個廚房一起工作。

單一流程 - 單一烹飪

廚房裡只有一名廚師。這位廚師將製作三道不同的菜餚:開胃菜、主菜和甜點。每道菜依序製作:
他準備並完成了開胃菜。
他繼續主菜並完成它。
最後,他做了甜點。
問題:

無論廚師有多快,他或她都會輪流,這會浪費廚房時間。
如果需要同時煮三種不同的菜餚,時間會更長。
多重處理 - 許多廚師

現在想像一下同一個廚房裡有三個廚師。每個人都在準備不同的菜餚:
開胃菜由一名廚師製作。
第二位廚師準備主菜。
第三位廚師做甜點。
優點:

三道菜同時製作,大大減少了總時間。
每個廚師獨立做自己的工作,不受其他人的影響。
在 Python 中的進程之間共享資料
在Python中,可以使用多處理模組在不同進程之間共用資料。但是,每個進程都使用自己的記憶體空間。因此,使用特殊的機制在進程之間共享資料。

from multiprocessing import Process

def print_square(numbers):
    for n in numbers:
        print(f"Square of {n} is {n * n}")

def print_cube(numbers):
    for n in numbers:
        print(f"Cube of {n} is {n * n * n}")

if __name__ == "__main__":
    numbers = [2, 3, 4, 5]  

    # İşlemler (processes) oluşturma
    process1 = Process(target=print_square, args=(numbers,))
    process2 = Process(target=print_cube, args=(numbers,))

    # İşlemleri başlatma
    process1.start()
    process2.start()

    # İşlemlerin tamamlanmasını bekleme
    process1.join()
    process2.join()

登入後複製
登入後複製
登入後複製

當我們檢查程式碼範例時,我們看到結果清單為空。主要原因是使用多處理創建的進程在自己的記憶體空間中工作,獨立於主進程。由於這種獨立性,子進程中所做的更改不會直接反映在主進程中的變數中。

Python 提供了以下共享資料的方法:

**1。共享記憶體
**Value 和 Array 物件用於在操作之間共用資料。
值:共享單一資料類型(例如數字)。
數組:用於共享資料數組。

import multiprocessing

result = []

def square_of_list(mylist):
    for num in mylist:
        result.append(num**2)
    return result

mylist= [1,3,4,5]

p1 = multiprocessing.Process(target=square_of_list,args=(mylist,))
p1.start()
p1.join()

print(result) # [] Boş Liste
登入後複製
登入後複製

**2。隊列
**它使用 FIFO(先進先出)結構在進程之間傳輸資料。
multiprocessing.Queue 允許多個進程發送和接收資料。

from multiprocessing import Process, Value

def increment(shared_value):
    for _ in range(1000):
        shared_value.value += 1  

if __name__ == "__main__":
    shared_value = Value('i', 0)  
    processes = [Process(target=increment, args=(shared_value,)) for _ in range(5)]

    for p in processes:
        p.start()
    for p in processes:
        p.join()

    print(f"Sonuç: {shared_value.value}")
登入後複製
登入後複製

**3。管道
**multiprocessing.Pipe 提供兩個進程之間的雙向資料傳輸。
它可用於發送和接收資料。

from multiprocessing import Process, Queue

def producer(queue):
    for i in range(5):
        queue.put(i)  # Kuyruğa veri ekle
        print(f"Üretildi: {i}")

def consumer(queue):
    while not queue.empty():
        item = queue.get()  
        print(f"Tüketildi: {item}")

if __name__ == "__main__":
    queue = Queue()

    producer_process = Process(target=producer, args=(queue,))
    consumer_process = Process(target=consumer, args=(queue,))

    producer_process.start()
    producer_process.join()

    consumer_process.start()
    consumer_process.join()
登入後複製

*進程之間的填充
*
「進程之間的填充」通常用於進程記憶體組織或避免存取多個進程之間共享的資料時的資料對齊和衝突問題。

這個概念在快取行錯誤共享等情況下尤其重要。當多個進程嘗試同時使用共享記憶體時,錯誤共享可能會導致效能損失。這是由於現代處理器中快取行的共享。

**進程之間的同步
**使用Python中的多處理模組,多個進程可以同時運作。然而,當多個進程需要存取相同的資料時,使用同步非常重要。這是確保數據一致性並避免競爭條件等問題所必需的。

from multiprocessing import Process, Pipe

def send_data(conn):
    conn.send([1, 2, 3, 4])  
    conn.close()

if __name__ == "__main__":
    parent_conn, child_conn = Pipe()  

    process = Process(target=send_data, args=(child_conn,))
    process.start()

    print(f"Alınan veri: {parent_conn.recv()}")  # Veri al
    process.join()
登入後複製

鎖定一次只允許一個程序存取共享資料。
在使用鎖的進程完成之前,其他進程會等待。

**多執行緒

多執行緒是一種平行程式設計模型,允許程式同時運行多個執行緒。執行緒是在同一進程中運行的較小的獨立程式碼單元,旨在透過共享資源實現更快、更有效率的處理。
在Python中,threading模組用於開發多執行緒應用程式。然而,由於Python的全域解釋器鎖定(GIL)機制,多執行緒在CPU密集型任務上提供的效能有限。因此,多執行緒通常是 I/O 密集型任務的首選。

執行緒是我們程式中的指令序列。

from multiprocessing import Process

def print_square(numbers):
    for n in numbers:
        print(f"Square of {n} is {n * n}")

def print_cube(numbers):
    for n in numbers:
        print(f"Cube of {n} is {n * n * n}")

if __name__ == "__main__":
    numbers = [2, 3, 4, 5]  

    # İşlemler (processes) oluşturma
    process1 = Process(target=print_square, args=(numbers,))
    process2 = Process(target=print_cube, args=(numbers,))

    # İşlemleri başlatma
    process1.start()
    process2.start()

    # İşlemlerin tamamlanmasını bekleme
    process1.join()
    process2.join()

登入後複製
登入後複製
登入後複製

**線程同步
**執行緒同步是當多個執行緒同時存取相同資源時用於保證資料一致性和順序的技術。在Python中,threading模組提供了幾種用於同步的工具。

**為什麼需要執行緒同步?
**比賽條件:

當兩個或多個執行緒同時存取共享資源時,可能會出現資料不一致的情況。
例如,一個執行緒可能讀取數據,而另一個執行緒更新相同的數據。
*資料一致性:
*

需要執行緒之間的協調來確保共享資源正確更新。
Python 中的同步工具範例
**1.鎖
**當一個執行緒取得鎖時,它會等待鎖被釋放,然後其他執行緒才能存取相同資源。

import multiprocessing

result = []

def square_of_list(mylist):
    for num in mylist:
        result.append(num**2)
    return result

mylist= [1,3,4,5]

p1 = multiprocessing.Process(target=square_of_list,args=(mylist,))
p1.start()
p1.join()

print(result) # [] Boş Liste
登入後複製
登入後複製

2 活動

from multiprocessing import Process, Value

def increment(shared_value):
    for _ in range(1000):
        shared_value.value += 1  

if __name__ == "__main__":
    shared_value = Value('i', 0)  
    processes = [Process(target=increment, args=(shared_value,)) for _ in range(5)]

    for p in processes:
        p.start()
    for p in processes:
        p.join()

    print(f"Sonuç: {shared_value.value}")
登入後複製
登入後複製

**結論:
**執行緒同步對於防止執行緒存取共享資源時出現資料不一致至關重要。 Python中,Lock、RLock、Semaphore、Event、Condition等工具根據同步需求提供了有效的解決方案。使用哪種工具取決於應用程式的需求和同步要求。

以上是Python 中的進程管理:平行程式設計基礎的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

<🎜>:泡泡膠模擬器無窮大 - 如何獲取和使用皇家鑰匙
4 週前 By 尊渡假赌尊渡假赌尊渡假赌
北端:融合系統,解釋
4 週前 By 尊渡假赌尊渡假赌尊渡假赌
Mandragora:巫婆樹的耳語 - 如何解鎖抓鉤
3 週前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

熱門話題

Java教學
1676
14
CakePHP 教程
1429
52
Laravel 教程
1333
25
PHP教程
1278
29
C# 教程
1257
24
Python與C:學習曲線和易用性 Python與C:學習曲線和易用性 Apr 19, 2025 am 12:20 AM

Python更易學且易用,C 則更強大但複雜。 1.Python語法簡潔,適合初學者,動態類型和自動內存管理使其易用,但可能導致運行時錯誤。 2.C 提供低級控制和高級特性,適合高性能應用,但學習門檻高,需手動管理內存和類型安全。

學習Python:2小時的每日學習是否足夠? 學習Python:2小時的每日學習是否足夠? Apr 18, 2025 am 12:22 AM

每天學習Python兩個小時是否足夠?這取決於你的目標和學習方法。 1)制定清晰的學習計劃,2)選擇合適的學習資源和方法,3)動手實踐和復習鞏固,可以在這段時間內逐步掌握Python的基本知識和高級功能。

Python vs.C:探索性能和效率 Python vs.C:探索性能和效率 Apr 18, 2025 am 12:20 AM

Python在開發效率上優於C ,但C 在執行性能上更高。 1.Python的簡潔語法和豐富庫提高開發效率。 2.C 的編譯型特性和硬件控制提升執行性能。選擇時需根據項目需求權衡開發速度與執行效率。

Python vs. C:了解關鍵差異 Python vs. C:了解關鍵差異 Apr 21, 2025 am 12:18 AM

Python和C 各有優勢,選擇應基於項目需求。 1)Python適合快速開發和數據處理,因其簡潔語法和動態類型。 2)C 適用於高性能和系統編程,因其靜態類型和手動內存管理。

Python標準庫的哪一部分是:列表或數組? Python標準庫的哪一部分是:列表或數組? Apr 27, 2025 am 12:03 AM

pythonlistsarepartofthestAndArdLibrary,herilearRaysarenot.listsarebuilt-In,多功能,和Rused ForStoringCollections,而EasaraySaraySaraySaraysaraySaraySaraysaraySaraysarrayModuleandleandleandlesscommonlyusedDduetolimitedFunctionalityFunctionalityFunctionality。

Python:自動化,腳本和任務管理 Python:自動化,腳本和任務管理 Apr 16, 2025 am 12:14 AM

Python在自動化、腳本編寫和任務管理中表現出色。 1)自動化:通過標準庫如os、shutil實現文件備份。 2)腳本編寫:使用psutil庫監控系統資源。 3)任務管理:利用schedule庫調度任務。 Python的易用性和豐富庫支持使其在這些領域中成為首選工具。

科學計算的Python:詳細的外觀 科學計算的Python:詳細的外觀 Apr 19, 2025 am 12:15 AM

Python在科學計算中的應用包括數據分析、機器學習、數值模擬和可視化。 1.Numpy提供高效的多維數組和數學函數。 2.SciPy擴展Numpy功能,提供優化和線性代數工具。 3.Pandas用於數據處理和分析。 4.Matplotlib用於生成各種圖表和可視化結果。

Web開發的Python:關鍵應用程序 Web開發的Python:關鍵應用程序 Apr 18, 2025 am 12:20 AM

Python在Web開發中的關鍵應用包括使用Django和Flask框架、API開發、數據分析與可視化、機器學習與AI、以及性能優化。 1.Django和Flask框架:Django適合快速開發複雜應用,Flask適用於小型或高度自定義項目。 2.API開發:使用Flask或DjangoRESTFramework構建RESTfulAPI。 3.數據分析與可視化:利用Python處理數據並通過Web界面展示。 4.機器學習與AI:Python用於構建智能Web應用。 5.性能優化:通過異步編程、緩存和代碼優

See all articles