Exécution concourante

Les modules documentés dans ce chapitre fournissent des outils d'exécution concourante de code. Le choix de l'outil approprié dépend de la tâche à exécuter (limitée par le CPU (CPU bound), ou limitée la vitesse des entrées-sorties (IO bound)) et du style de développement désiré (coopération gérée par des évènements ou multitâche préemptif). En voici un survol :

• threading --- Thread-based parallelism
  • active_count()
  • current_thread()
  • excepthook()
  • __excepthook__
  • get_ident()
  • get_native_id()
  • enumerate()
  • main_thread()
  • settrace()
  • settrace_all_threads()
  • gettrace()
  • setprofile()
  • setprofile_all_threads()
  • getprofile()
  • stack_size()
  • TIMEOUT_MAX
  • Données locales au fil d'exécution
    • local
  • Objets Threads
    • Thread
      • start()
      • run()
      • join()
      • name
      • getName()
      • setName()
      • ident
      • native_id
      • is_alive()
      • daemon
      • isDaemon()
      • setDaemon()
  • Verrous
    • Lock
      • acquire()
      • release()
      • locked()
  • RLock Objects
    • RLock
      • acquire()
      • release()
  • Condition Objects
    • Condition
      • acquire()
      • release()
      • wait()
      • wait_for()
      • notify()
      • notify_all()
  • Semaphore Objects
    • Semaphore
      • acquire()
      • release()
    • BoundedSemaphore
    • Semaphore Example
  • Event Objects
    • Event
      • is_set()
      • set()
      • clear()
      • wait()
  • Timer Objects
    • Timer
      • cancel()
  • Barrier Objects
    • Barrier
      • wait()
      • reset()
      • abort()
      • parties
      • n_waiting
      • broken
    • BrokenBarrierError
  • Using locks, conditions, and semaphores in the with statement
• multiprocessing --- Process-based parallelism
  • Introduction
    • La classe Process
    • Contextes et méthodes de démarrage
    • Échange d'objets entre les processus
    • Synchronisation entre processus
    • Partager un état entre les processus
    • Utiliser un pool de workers
  • Référence
    • Process et exceptions
      • Process
        • run()
        • start()
        • join()
        • name
        • is_alive()
        • daemon
        • pid
        • exitcode
        • authkey
        • sentinel
        • terminate()
        • kill()
        • close()
      • ProcessError
      • BufferTooShort
      • AuthenticationError
      • TimeoutError
    • Tubes (pipes) et files (queues)
      • Pipe()
      • Queue
        • qsize()
        • empty()
        • full()
        • put()
        • put_nowait()
        • get()
        • get_nowait()
        • close()
        • join_thread()
        • cancel_join_thread()
      • SimpleQueue
        • close()
        • empty()
        • get()
        • put()
      • JoinableQueue
        • task_done()
        • join()
    • Divers
      • active_children()
      • cpu_count()
      • current_process()
      • parent_process()
      • freeze_support()
      • get_all_start_methods()
      • get_context()
      • get_start_method()
      • set_executable()
      • set_forkserver_preload()
      • set_start_method()
    • Objets de connexions
      • Connection
        • send()
        • recv()
        • fileno()
        • close()
        • poll()
        • send_bytes()
        • recv_bytes()
        • recv_bytes_into()
    • Primitives de synchronisation
      • Barrier
      • BoundedSemaphore
      • Condition
      • Event
      • Lock
        • acquire()
        • release()
      • RLock
        • acquire()
        • release()
      • Semaphore
    • Objets ctypes partagés
      • Value()
      • Array()
      • Le module multiprocessing.sharedctypes
        • RawArray()
        • RawValue()
        • Array()
        • Value()
        • copy()
        • synchronized()
    • Gestionnaires
      • Manager()
      • BaseManager
        • start()
        • get_server()
        • connect()
        • shutdown()
        • register()
        • address
      • SyncManager
        • Barrier()
        • BoundedSemaphore()
        • Condition()
        • Event()
        • Lock()
        • Namespace()
        • Queue()
        • RLock()
        • Semaphore()
        • Array()
        • Value()
        • dict()
        • list()
      • Namespace
      • Gestionnaires personnalisés
      • Utiliser un gestionnaire distant
    • Objets mandataires
      • BaseProxy
        • _callmethod()
        • _getvalue()
        • __repr__()
        • __str__()
      • Nettoyage
    • Pools de processus
      • Pool
        • apply()
        • apply_async()
        • map()
        • map_async()
        • imap()
        • imap_unordered()
        • starmap()
        • starmap_async()
        • close()
        • terminate()
        • join()
      • AsyncResult
        • get()
        • wait()
        • ready()
        • successful()
    • Auditeurs et Clients
      • deliver_challenge()
      • answer_challenge()
      • Client()
      • Listener
        • accept()
        • close()
        • address
        • last_accepted
      • wait()
      • Formats d'adresses
    • Clés d'authentification
    • Journalisation
      • get_logger()
      • log_to_stderr()
    • Le module multiprocessing.dummy
      • ThreadPool
  • Lignes directrices de programmation
    • Toutes les méthodes de démarrage
    • Les méthodes de démarrage spawn et forkserver
  • Exemples
• multiprocessing.shared_memory --- Shared memory for direct access across processes
  • SharedMemory
    • close()
    • unlink()
    • buf
    • name
    • size
  • SharedMemoryManager
    • SharedMemory()
    • ShareableList()
  • ShareableList
    • count()
    • index()
    • format
    • shm
• The concurrent package
• concurrent.futures --- Launching parallel tasks
  • Executor Objects
    • Executor
      • submit()
      • map()
      • shutdown()
  • ThreadPoolExecutor
    • ThreadPoolExecutor
    • ThreadPoolExecutor Example
  • ProcessPoolExecutor
    • ProcessPoolExecutor
    • ProcessPoolExecutor Example
  • Future Objects
    • Future
      • cancel()
      • cancelled()
      • running()
      • done()
      • result()
      • exception()
      • add_done_callback()
      • set_running_or_notify_cancel()
      • set_result()
      • set_exception()
  • Module Functions
    • wait()
      • FIRST_COMPLETED
      • FIRST_EXCEPTION
      • ALL_COMPLETED
    • as_completed()
  • Exception classes
    • CancelledError
    • TimeoutError
    • BrokenExecutor
    • InvalidStateError
    • BrokenThreadPool
    • BrokenProcessPool
• subprocess --- Subprocess management
  • Utiliser le module subprocess
    • run()
    • CompletedProcess
      • args
      • returncode
      • stdout
      • stderr
      • check_returncode()
    • DEVNULL
    • PIPE
    • STDOUT
    • SubprocessError
    • TimeoutExpired
      • cmd
      • timeout
      • output
      • stdout
      • stderr
    • CalledProcessError
      • returncode
      • cmd
      • output
      • stdout
      • stderr
    • Arguments fréquemment utilisés
    • Constructeur de Popen
      • Popen
    • Exceptions
  • Considérations de sécurité
  • Objets Popen
    • poll()
    • wait()
    • communicate()
    • send_signal()
    • terminate()
    • kill()
    • args
    • stdin
    • stdout
    • stderr
    • pid
    • returncode
  • Utilitaires Popen pour Windows
    • STARTUPINFO
      • dwFlags
      • hStdInput
      • hStdOutput
      • hStdError
      • wShowWindow
      • lpAttributeList
    • Constantes Windows
      • STD_INPUT_HANDLE
      • STD_OUTPUT_HANDLE
      • STD_ERROR_HANDLE
      • SW_HIDE
      • STARTF_USESTDHANDLES
      • STARTF_USESHOWWINDOW
      • CREATE_NEW_CONSOLE
      • CREATE_NEW_PROCESS_GROUP
      • ABOVE_NORMAL_PRIORITY_CLASS
      • BELOW_NORMAL_PRIORITY_CLASS
      • HIGH_PRIORITY_CLASS
      • IDLE_PRIORITY_CLASS
      • NORMAL_PRIORITY_CLASS
      • REALTIME_PRIORITY_CLASS
      • CREATE_NO_WINDOW
      • DETACHED_PROCESS
      • CREATE_DEFAULT_ERROR_MODE
      • CREATE_BREAKAWAY_FROM_JOB
  • Ancienne interface (API) haut-niveau
    • call()
    • check_call()
    • check_output()
  • Remplacer les fonctions plus anciennes par le module subprocess
    • Remplacement de la substitution de commandes de terminal /bin/sh
    • Remplacer les pipes du shell
    • Remplacer os.system()
    • Remplacer les fonctions de la famille os.spawn
    • Remplacer os.popen(), os.popen2(), os.popen3()
    • Replacing functions from the popen2 module
  • Remplacement des fonctions originales d'invocation du shell
    • getstatusoutput()
    • getoutput()
  • Notes
    • Convertir une séquence d'arguments vers une chaîne de caractères sous Windows
    • Disabling use of vfork() or posix_spawn()
• sched --- Event scheduler
  • scheduler
  • Scheduler Objects
    • enterabs()
    • enter()
    • cancel()
    • empty()
    • run()
    • queue
• queue --- A synchronized queue class
  • Queue
  • LifoQueue
  • PriorityQueue
  • SimpleQueue
  • Empty
  • Full
  • Objets Queue
    • qsize()
    • empty()
    • full()
    • put()
    • put_nowait()
    • get()
    • get_nowait()
    • task_done()
    • join()
  • Objets SimpleQueue
    • qsize()
    • empty()
    • put()
    • put_nowait()
    • get()
    • get_nowait()
• contextvars --- Context Variables
  • Variables de contexte
    • ContextVar
      • name
      • get()
      • set()
      • reset()
    • Token
      • var
      • old_value
      • MISSING
  • Gestion de contexte manuelle
    • copy_context()
    • Context
      • run()
      • copy()
      • get()
      • keys()
      • values()
      • items()
  • Gestion avec asyncio

Les modules suivants servent de fondation pour certains services cités ci-dessus :

• _thread --- Low-level threading API
  • error
  • LockType
  • start_new_thread()
  • interrupt_main()
  • exit()
  • allocate_lock()
  • get_ident()
  • get_native_id()
  • stack_size()
  • TIMEOUT_MAX
  • acquire()
  • release()
  • locked()