Python Subprocess Express des descripteurs de fichiers

J'ai eu le même problème.

Nous utilisons constamment des sous-processus.Popen () pour invoquer des outils externes dans un environnement Windows. À un moment donné, nous avons eu un problème dans lequel aucun autre descripteurs de fichiers n'était disponible. Nous avons foré à la question et avons découvert que les instances de sous-processus.Popen se comportent différemment sous Windows que sous Linux. P>

Si l'instance popen n'est pas détruite (par exemple, en gardant une référence en quelque sorte, et ne permettant ainsi pas à la poubelle. Pour détruire l'objet), les tuyaux créés lors de l'appel restent ouverts sous Windows, tandis que sous Linux, ils ont été automatiquement fermés après que popen.communicate () a été appelée. Si cela est poursuivi dans d'autres appels, les descripteurs de fichiers «zombies» des tuyaux s'empileront et provoqueront éventuellement une exception Python ioerror: [errno 24] trop de fichiers ouverts code>. P> Comment obtenir des descripteurs de fichier ouverts dans Python h2>

Pour que nous puissions résoudre nos problèmes, nous avions besoin d'un moyen d'obtenir les descripteurs de fichiers valides dans un script Python. Donc, nous avons conçu le script suivant. Notez que nous ne vérifions que des descripteurs de fichiers de 0 à 100, puisque nous n'ouvrons pas tant de fichiers simultanément. P>

fd_table_status.py strong>: p> xxx Pré>

Lorsque vous exécutez simplement, il affichera tous les descripteurs de fichiers ouverts et leur type respectif: p> xxx pré>

La sortie est la même en appelant fd_table_status_str () via le code PYTHON. Pour plus de détails sur la «Chr» et le respect de «codes courts» signification, voir Documentation Python sur Stat . p>

Comportement de descripteur de fichier de test h2>

Essayez d'exécuter le script suivant sous Linux et Windows: p>

Test_fd_handling.py strong> : P>

1) Initial file descriptors:
Open file handles: 0: CHR, 1: CHR, 2: CHR
2) After file open, before Popen:
Open file handles: 0: CHR, 1: CHR, 2: CHR, 3: REG
3) After Popen, before reading piped output:
Open file handles: 0: CHR, 1: CHR, 2: CHR, 3: REG, 4: FIFO, 5: FIFO, 6: FIFO
4) After Popen.communicate():
Open file handles: 0: CHR, 1: CHR, 2: CHR, 3: REG, 5: FIFO, 6: FIFO
5) After deleting reference to Popen instance:
Open file handles: 0: CHR, 1: CHR, 2: CHR, 3: REG
6) After deleting reference to file instance:
Open file handles: 0: CHR, 1: CHR, 2: CHR
7) child process had the following file descriptors:
Open file handles: 0: FIFO, 1: FIFO, 2: FIFO