Français
Français
En PHP, lors du traitement des fichiers Big Data, des calculs de compression et de hachage sont généralement impliqués. hash_update_stream est une fonction très utile qui nous permet de hacher le flux, pas seulement des fichiers ou des chaînes. De cette façon, nous pouvons traiter le flux de données étape par étape et calculer la valeur de hachage lors de la compression du fichier, ce qui est très utile pour de nombreuses applications de transmission et de stockage de données.
GZIP Compression Stream : GZIP est un format de compression populaire qui compresse les fichiers en volumes plus petits et est souvent utilisé pour réduire l'utilisation de la bande passante lors du transfert de grandes quantités de données.
Hash Stream : Hash est un algorithme qui mappe les données de toute longueur en sortie de longueur fixe. Les algorithmes de hachage communs incluent MD5, SHA1, etc., qui sont utilisés pour la vérification des données de la somme de fichiers.
Grâce à PHP, nous pouvons utiliser hash_update_stream combinés avec gzopen pour réaliser simultanément la compression et le calcul de hachage des données. Les étapes et les codes spécifiques sont illustrés ci-dessous.
Ouvrez le flux de fichiers d'entrée : nous avons d'abord besoin d'un flux de fichiers pour lire les données. Ici, nous pouvons utiliser GZOpen pour ouvrir un flux de fichiers compressé GZIP, ou utiliser FOPEN pour ouvrir un flux de fichiers normal.
Créez un flux de hachage : Ensuite, utilisez HASH_INIT pour initialiser l'algorithme de hachage et utiliser hash_update_stream pour saisir les données de flux dans le calcul du hachage.
Traitement des données étape par étape : Calculez la valeur de hachage lors de la compression du flux de données.
Fermer Stream : Après le traitement des données, vous devez fermer tous les flux et enfin sortir la valeur de hachage.
Voici un exemple de code qui montre comment utiliser hash_update_stream lors de la gestion des flux compressés GZIP et des opérations de flux de hachage.
<?php
// Configuration de l'algorithme de hachage（comme MD5）
$hash_algorithm = 'sha256';
// Ouvrez le flux de fichiers d'entrée（Ici, l'entrée est supposée être gzip document）
$input_file = 'example.txt.gz';
$gzip_stream = gzopen($input_file, 'rb');
// Créer un contexte de hachage
$hash_context = hash_init($hash_algorithm);
// 打开输出document流（Ici, la sortie est supposée être gzip Flux comprimé）
$output_file = 'output_compressed.gz';
$output_stream = gzopen($output_file, 'wb');
// Lisez les données étape par étape et traitez-les
while (!gzeof($gzip_stream)) {
// Lire un morceau de données
$data = gzread($gzip_stream, 4096);
// Mettre à jour la valeur de hachage
hash_update_stream($hash_context, $data);
// Écrire des données compressées
gzwrite($output_stream, $data);
}
// 关闭document流
gzclose($gzip_stream);
gzclose($output_stream);
// Obtenez la valeur de hachage finale
$final_hash = hash_final($hash_context);
// Valeur de hachage de sortie
echo "The hash of the gzipped data is: " . $final_hash . "\n";
?>
gzopen : utilisé pour ouvrir le flux de fichiers compressé GZIP. Ici, nous lisons un fichier nommé Exemple.txt.gz et lisons en continu son contenu via Gzread .
hash_init : initialisez un algorithme de hachage (comme Sha256), qui est l'outil que nous utiliserons pour calculer la valeur de hachage du contenu du fichier.
hash_update_stream : passez chaque élément de données lue dans le contexte de hachage pour le calcul du hachage.
GZWrite : écrivez des données dans le flux de fichiers compressé, où nous écrivons les données d'origine dans le nouveau fichier GZIP via GZWrite .
GZCLOSE : Une fois l'opération terminée, nous devons fermer le flux de fichiers pour libérer les ressources système.
Hash_Final : Complétez le calcul du hachage et sortit la valeur de hachage finale.
Cette méthode convient au traitement des données importantes de fichiers ou de streaming, en particulier dans les scénarios où la compression et la vérification des données sont nécessaires lors de la transmission ou du stockage du réseau. Par exemple, téléchargez un fichier compressé GZIP et effectuez une vérification de l'intégrité du fichier en même temps, ou stockez une grande quantité de données en compression et calculez leurs valeurs de hachage.
De cette façon, nous pouvons non seulement compresser efficacement les données, mais également assurer l'intégrité des données pendant la transmission et le stockage.
Assurez-vous d'utiliser l'algorithme de hachage approprié. MD5 et SHA1 sont des choix courants, mais ils ne conviennent pas aux applications sûres et sensibles, et des algorithmes SHA256 ou plus forts sont recommandés.
Lorsque vous lisez des données de flux, veillez à gérer l'extrémité du flux et utilisez Gzeof pour vérifier si le flux s'est terminé.
Étant donné que les opérations de streaming sont progressivement effectuées étape par étape, elles conviennent à la gestion des fichiers volumineux et des environnements avec de grandes limitations de mémoire.
