écriture dans le fichier ne se contente pas de rinçage et automatiquement provoquer de mémoire en Python

Question

J'ai fait simple programme de python pour générer grand fichier texte:

import sys 
import random 

f = open('data.txt', 'w') 
for i in range(100000000): 
     f.write(str(i) + "\t" + str(random.randint(0,1000)) + "\n") 
f.close() 

Quand je lance à l'aide CPython il manger toute la mémoire OS disponible et N'écris rien dans le fichier.

Lorsque je lance sur Jython je reçois OutOfMemoryException.

Pour autant que je comprends tout stocke dans la mémoire tampon et jamais avant affleurant close() appel.

Ma question est: comment limiter le tampon de fichier et déclencher autoflush? Je ne veux pas appeler manuellement flush(), je pense que c'est mal du point de vue des performances. Je veux flush() être appelé automatiquement lorsque le tampon de fichier est surchargé ou plus.

Merci!

Answer 1

La mise en mémoire tampon n'est pas un problème. Le problème est d'appeler la fonction range() avec un argument géant, qui tentera d'allouer un tableau avec beaucoup d'éléments. Vous obtiendrez la même erreur si vous dites que

r = range(100000000) 

Answer 2

Avez-vous essayé passing in a buffer size à la fonction open?

f = open('data.txt', 'w', 5000)