É muito provável que você precise de autenticação. Isso pode ser tão simples quanto fornecer seu nome de usuário e senha para a conta de e-mail da qual você deseja enviar.
Se for esse o caso, sugiro que você use a extensão PEAR Mail. Existe uma função chamada factory que permite fazer autenticação com um servidor smtp. (Incluindo criptografia SSL, se você descobrir que seu servidor precisa)
http://pear.php.net/manual/en /package.mail.mail.factory.php
Seu código ficaria um pouco assim:
$smtp = Mail::factory('smtp',
array ('host' => $host,
'port' => $port,
'auth' => true,
'username' => $username,
'password' => $password));
$mail = $smtp->send($to, $headers, $body);
Instalar extensões PEAR em seu servidor não é tão difícil quanto você imagina.