Récupération de la somme de contrôle MD5 pour les fichiers très volumineux

Question

J'ai écrit un script qui lit tous les fichiers d'un répertoire et renvoie le hachage md5 pour chaque fichier. Cependant, il ne rend rien pour un fichier assez volumineux. Je suppose que l'interpréteur a une certaine valeur définie pour un temps de traitement maximal, et comme cela prend trop de temps pour obtenir cette valeur, il passe juste à d'autres fichiers. Est-il possible d'obtenir une somme de contrôle md5 pour les fichiers volumineux via PHP? Si non, pourrait-il être fait à travers un travail chron avec cpanel? J'ai donné un coup de feu là-bas mais il ne semble pas que ma commande md5sum ait jamais été traitée: je n'ai jamais reçu d'email avec le hash. Voici le PHP que j'ai déjà écrit. Il est un code très simple et fonctionne pour les fichiers d'une taille raisonnable:

function md5_dir($dir) { 
    if (is_dir($dir)) { 
     if ($dh = opendir($dir)) { 
      while (($file = readdir($dh)) !== false) { 
       echo nl2br($file . "\n" . md5_file($file) . "\n\n"); 
      } 
      closedir($dh); 
     } 
    } 
} 

Answer 1

Bien que je ne puisse pas le reproduire avec PHP 5.2 ou 5.3 avec un fichier de 2 Go, le problème semble se poser sur les versions PHP 32 bits.

Même si ce n'est pas une solution vraiment sympa, vous pouvez essayer de laisser le système au hasing

echo system("md5sum test.txt"); 

46d6a7bcbcf7ae0501da341cb3bae27c test.txt

Answer 2

Si vous touchez une limite de temps d'exécution ou le temps d'exécution maximum, PHP devrait être jeter un message d'erreur à cet effet. Vérifiez vos journaux d'erreurs. Si vous frappez une limite, vous pouvez définir les valeurs maximales pour l'utilisation de la mémoire PHP et le temps d'exécution dans votre fichier php.ini:

memory_limit = 16M 

sera mis en utilisation de la mémoire max 16 megs. Pour une durée d'exécution maximale:

max_execution_time = 30 

définit la durée d'exécution maximale à 30 secondes.

Answer 3

vous pouvez le réaliser avec la ligne de commande

shell_exec('md5sum -b '. $fileName); 

Answer 4

Assurez-vous d'utiliser escapeshellarg (http://us3.php.net/manual/en/function.escapeshellarg.php) si vous décidez d'utiliser un appel shell_exec() ou system(). À savoir,

shell_exec('md5sum -b ' . escapeshellarg($filename)); 

Answer 5

Pour votre information .... au cas où quelqu'un a besoin d'une somme de contrôle md5 rapide(). PHP est assez rapide même avec les fichiers plus volumineux. Cela retourne la somme de contrôle sur Linux Mint .iso (taille 880MB) en 3 sec.

<?php 
// checksum 
$path = $_SERVER['DOCUMENT_ROOT']; // get upload folder path 
$file = $path."/somefolder/linux-mint.iso"; // any file 
echo md5_file($file); 
?>