Sim, há uma conexão separada aberta para cada página. No entanto, supondo que você não esteja fazendo nada com uso intensivo de banco de dados, a conexão será de curta duração e se fechará assim que a página for servida ao cliente.

Se você exceder o número máximo de conexões, qualquer tentativa de conexão subsequente falhará.