array_chunkを使用するときにメモリオーバーフローを避ける方法

M66 2025-04-28

PHPでは、 array_chunk関数は、大きな配列を小さなチャンクに分割するための非常に実用的なツールです。便利な機能を提供しますが、特にアレイが非常に大きくなったり、スプリットブロックが多すぎたりする場合、非常に大きな配列を扱うときにメモリオーバーフローの問題を引き起こす可能性があります。

1。array_chunkの基本的な使用

array_chunk関数の基本的な構文は次のとおりです。

 array_chunk(array $array, int $length, bool $preserve_keys = false): array

$配列：入力配列。
$の長さ：各サブアレイの要素の数。
$ preserve_keys ：元の配列の重要な値を維持するかどうかを決定するブール値。

 $array = [1, 2, 3, 4, 5, 6, 7, 8, 9];
$chunks = array_chunk($array, 3);
print_r($chunks);

出力：

 Array
(
    [0] => Array ( [0] => 1 [1] => 2 [2] => 3 )
    [1] => Array ( [0] => 4 [1] => 5 [2] => 6 )
    [2] => Array ( [0] => 7 [1] => 8 [2] => 9 )
)

このコードは、配列$配列を3つのブロックに分割し、各ブロックには3つの要素が含まれています。

2. array_chunkがメモリオーバーフローを引き起こすのはなぜですか？

非常に大きな配列を分割すると、 array_chunkは、各サブアレイに元の配列のデータの一部が含まれる新しい2次元配列を返します。元の配列が非常に大きく、ブロックの数が非常に大きい場合、これによりPHPがメモリに多数のサブアレイを作成し、メモリオーバーフローの問題を引き起こす可能性があります。

例えば：

何百万もの要素を含む非常に大きな配列があるとします。 Array_chunkを使用して1000のチャンクに分割すると、多数のサブアレイが作成される場合があります。それぞれがメモリを取り上げる必要があり、メモリ使用量が急激に増加し、メモリオーバーフローが引き起こされます。

3.メモリオーバーフローを避ける方法は？

Array_chunkを使用するときにメモリオーバーフローを避けるために、次の戦略を採用できます。

3.1ジェネレーターの使用

ジェネレーターは、PHPによって提供されるメモリ効率の高い方法であり、すべてのデータを一度にメモリにロードするのではなく、オンデマンドでデータを生成できます。発電機を使用してブロックごとにデータを処理できるため、配列全体を一度にメモリにロードすることを避けることができます。

 function chunkGenerator(array $array, $chunkSize) {
    $chunk = [];
    foreach ($array as $key => $value) {
        $chunk[] = $value;
        if (count($chunk) >= $chunkSize) {
            yield $chunk;
            $chunk = [];
        }
    }
    if (count($chunk) > 0) {
        yield $chunk;
    }
}

$array = range(1, 10000000);
foreach (chunkGenerator($array, 1000) as $chunk) {
    // それぞれを処理します $chunk
}

この例では、 evelyキーワードを使用してジェネレーターを作成しました。ブロックが生成されるたびに、すべてのブロックを一度にメモリにロードするのではなく、一時的にブロックを返します。これにより、メモリの使用量が大幅に削減されます。

3.2ステップバイステップの大きな配列

発電機を使用できない場合は、バッチをロードしたり、データを段階的に処理したりすることで、メモリオーバーフローを回避することを検討できます。たとえば、データがデータベースまたは外部APIから届く場合、大型配列全体を一度にロードする代わりに、データをバッチにロードできます。

データがURLから取得されていると仮定すると、すべてを一度にロードするのではなく、URLからデータを段階的にロードできます。

 function fetchDataInChunks($url, $chunkSize) {
    $handle = fopen($url, 'r');
    $chunk = [];
    while (($line = fgets($handle)) !== false) {
        $chunk[] = $line;
        if (count($chunk) >= $chunkSize) {
            yield $chunk;
            $chunk = [];
        }
    }
    fclose($handle);
    if (count($chunk) > 0) {
        yield $chunk;
    }
}

$url = 'https://m66.net/data.csv';
foreach (fetchDataInChunks($url, 1000) as $chunk) {
    // それぞれを処理します $chunk
}

3.3一度に過剰なブロック作成を減らします

配列データが非常に大きいが、ジェネレーターを使用したくない場合は、各ブロックを変更することで一度に作成されたブロックの数を減らすことができます。たとえば、ブロックサイズを少し大きく設定し、多くの小さなブロックに分割する代わりに、毎回データのブロックを処理します。

4。概要

Array_chunkで大きな配列を分割すると、特にアレイが特に大きい場合やブロックの数が大きすぎる場合、メモリオーバーフローの問題を引き起こす可能性があります。この問題を解決するために、次の方法を使用できます。

ジェネレーターの使用：オンデマンドでデータを生成して、メモリフットプリントを削減します。
ステップバイステップ：データが外部ソースから来る場合、データをバッチにロードできます。
サイズブロックのサイズ：ブロックの数を減らし、各ブロックのサイズを増やし、それによりメモリの使用量を削減します。

これらの方法は、大量のデータがボリュームしている場合にメモリの問題に対処し、プログラムをより効率的に実行するのに効果的に役立ちます。

参照

array_chunk