¿Por qué Gibraltar no es territorio español?

Como ocurre con Gibraltar, que pese a que está situado en la Península Ibérica, cayó en manos de Reino Unido hace más de 300 años.