Expor qualquer parte do phpMyAdmin é um risco potencial. Você pode usar as diretivas Allow/Deny do Apache:
Order Deny,Allow
Deny from All
Allow from 12.34.56.78
Substitua
12.34.56.78
com seu endereço IP, e coloque-o em um arquivo .htaccess na sua pasta phpMyAdmin.