Ok, veamos la función "$_SERVER["REMOTE_ADDR"];" lo que hace es dar la IP que tenía el paquete que le enviastes, es decir muestra la IP del que ve la página, lo que creo que quieres saber quien te envia información es decir quien te refiere, para eso usa la función "$_SERVER["HTTP_REFERER"];" pero com no se muy bien lo que quieres te dejo esta web:
http://es.php.net/manual/es/reserved.variables.php#reserved.variables.server
http://es.php.net/manual/es/reserved.variables.php#reserved.variables.server