Mysql
 sql >> Base de Dados >  >> RDS >> Mysql

Como recuperar grandes conjuntos de dados em várias tabelas e evitar consultas em loop


Supondo que suas 7 tabelas estejam vinculadas por ids, faça algo assim

Primeira consulta
'SELECT * FROM table_a WHERE a_id IN (12,233,4545,67676,898999)'
// store the result in $result_of_first_query

Em seguida, faça um foreach e escolha os ids que deseja usar na próxima consulta em uma variável separada por vírgula (csv)
foreach($result_of_first_query as $a_row_from_first_table)
{
    $csv_for_second_query = $csv_for_second_query.$a_row_from_first_table['b_id'].",";
}

$csv_for_second_query = trim($csv_for_second_query,", "); // problem is we will have a lot of duplicate entries
$temp_arr = array(); // so lets remove the duplicates
$temp_arr = explode(",",$csv_for_second_query);  // explode values in array
$temp_arr = array_unique($temp_arr);  // remove duplicates
$csv_for_second_query = implode(",",$temp_arr);  // create csv string again. ready!

agora para sua segunda tabela, você obterá, com apenas 1 consulta todos os valores que você precisa para JOIN (não por mysql, faremos isso com php)

Segunda consulta
'SELECT * FROM table_b where a_id IN ('.$csv_for_second_query.')'
// store the result in $result_of_second_query;

Então, precisamos apenas unir programaticamente as duas matrizes.
$result_a_and_b = array(); // we will store the joined result of every row here

// lets scan every row from first table
foreach($result_of_first_query as $inc=> $a_row_from_first_table)
{
    // assign every row from frist table to result_a_and_b 
    $result_a_and_b[$inc]['a']=$a_row_from_first_table;

    $inc_b=0; // counter for the joins that will happen by data from second table

    // for every row from first table we will scan every row from second table
    // so we need this nested foreach
    foreach($result_of_second_query as $a_row_from_second_table)
    {
        // are data need to join? if yes then do so! :)
        if($a_row_from_first_table['a_id']==$a_row_from_second_table['a_id'])
        {
            $result_a_and_b[$inc]['b'][$inc_b]=$a_row_from_second_table; // "join" in our "own" way :)
            ++$inc_b; // needed for the next join
        }
    }
}

agora temos o array $result_a_and_b com este formato:
$result_a_and_b[INDEX]['a']
$result_a_and_b[INDEX]['b'][INDEX]

então com 2 consultas, temos um resultado semelhante a TABLE_A_ROWS_NUMBER + 1 (uma é a consulta inicial da primeira tabela)

Assim continue fazendo quantos níveis quiser.
  1. Consulte o banco de dados com o id que vincula a tabela
  2. obtenha os IDs na string CSV
  3. consultar no próximo capaz usando WHERE id IN(11,22,33,44,55,.....)
  4. participe programaticamente

Dica:Você pode usar unset() para liberar memória em variáveis ​​temporárias.

Acredito ter respondido sua pergunta "Existe uma maneira de não consultar o banco de dados com tanta frequência?"

nota:código não testado para erros de digitação, talvez eu tenha perdido uma vírgula ou duas - ou talvez não

eu acredito que você pode obter o ponto :) espero que ajude!