Devolución IVA

Estimados Sres.: Presente la declaración del IVA del 4T de 2012 en el que me correspondía una devolución de 579€ correspondiente a las inversiones que había realizado para la puesta en marcha de mi consulta con fecha 07/11/2012 con dos epígrafes: médico especialista (epígrafe 832) y el epígrafe 824 (Profesor de Formación y Perfeccionamiento Profesional) La AEAT me contesta diciendo que no tengo derecho a la devolución ya que me aplican el articulo 20 de la ley de IVA por el cual los médicos especialistas el IVA lo tienen que asumir como gastos y no de pueden desgravar.
Teniendo en cuenta que las declaraciones las presento como un único sujeto pasivo en el cual se engloban los dos epígrafes (así me lo indicaron en la AEAT), mi pregunta es porque no me aplican las desgravaciones a el epígrafe 824 ya que las inversiones que realice y que soporte IVA son para mis dos actividades.
Puede ser porque no he tenido actividad con el epígrafe 824?. Cuando tenga actividad podría deducirme del IVA soportado a pesar que ya me los han desestimado?
Agradeciendo de antemano su colaboración, les envió un cordial saludo.
Miguel A. Alba