clydde, como te indican unas decimas de voltio no tienen importancia, es mas cuando estan las pilas nuevas seguro que sobrepasan los 5 v.

el mayor cuidado hay que tenerlo en el detalle de la polaridad en el conector y como indicas que ambos marcan positivo en el central no hay problemas, prueba sin miedo.

otra opcion que tienes si no te atreves es usar pilas recargables ya que un juego con su cargador tiene precios aceptables.