Você vai querer usar um analisador de streaming. Eles apenas puxam pequenas porções do seu arquivo para a memória de cada vez.
Eles vêm em alguns sabores diferentes:analisadores push do tipo SAX e analisadores pull. Modelos de leitor de XML:analisador de extração de SAX versus XML dá uma visão geral da diferença.
Analisador de envio
Este é um exemplo rápido usando salsify/json-streaming-parser.
Conforme ele percorre o arquivo, acompanharemos o
summonerId
, championId
, e estado. É tudo baseado em eventos - você não obtém acesso aleatório com um analisador sequencial, portanto, você mesmo precisa acompanhar as coisas. Toda vez que um totalSessionsPlayed
aparecer, ele ecoará o summonerId , championId , e totalSessõesJogadas . data.json
Este é um arquivo json emparelhado para fins de demonstração.
[
{
"_id": "53b29644aafd413977b23b7e",
"summonerId": 24570940,
"region": "euw",
"stats": {
"110": {
"totalSessionsPlayed": 3,
"totalSessionsLost": 2,
"totalSessionsWon": 1
},
"112": {
"totalSessionsPlayed": 45,
"totalSessionsLost": 2,
"totalSessionsWon": 1
}
}
},
{
"_id": "asdfasdfasdf",
"summonerId": 555555,
"region": "euw",
"stats": {
"42": {
"totalSessionsPlayed": 65,
"totalSessionsLost": 2,
"totalSessionsWon": 1
},
"88": {
"totalSessionsPlayed": 99,
"totalSessionsLost": 2,
"totalSessionsWon": 1
}
}
}
]
Exemplo:
class ListMatchUps extends JsonStreamingParser\Listener\IdleListener
{
private $key;
private $summonerId;
private $championId;
private $inStats;
public function start_document()
{
$this->key = null;
$this->summonerId = null;
$this->championId = null;
$this->inStats = false;
}
public function start_object()
{
if ($this->key === 'stats') {
$this->inStats = true;
} else if ($this->inStats) {
$this->championId = $this->key;
}
}
public function end_object()
{
if ($this->championId !== null) {
$this->championId = null;
} else if ($this->inStats) {
$this->inStats = false;
} else {
$this->summonerId = null;
}
}
public function key($key)
{
$this->key = $key;
}
public function value($value)
{
switch ($this->key) {
case 'summonerId':
$this->summonerId = $value;
break;
case 'totalSessionsPlayed':
echo "{$this->summonerId},{$this->championId},$value\n";
break;
}
}
}
$stream = fopen('data.json', 'r');
$listener = new ListMatchUps();
try {
$parser = new JsonStreamingParser_Parser($stream, $listener);
$parser->parse();
} catch (Exception $e) {
fclose($stream);
throw $e;
}
Saída:
24570940,110,3
24570940,112,45
555555,42,65
555555,88,99
Puxar analisador
Isso está usando um analisador que escrevi recentemente, pcrv/jsonreader (requer PHP 7.)
Mesmo data.json acima.
Exemplo:
use pcrov\JsonReader\JsonReader;
$reader = new JsonReader();
$reader->open("data.json");
while($reader->read("summonerId")) {
$summonerId = $reader->value();
$reader->next("stats");
foreach($reader->value() as $championId => $stats) {
echo "$summonerId, $championId, {$stats['totalSessionsPlayed']}\n";
}
}
$reader->close();
Saída:
24570940, 110, 3
24570940, 112, 45
555555, 42, 65
555555, 88, 99