Cliente que no declara IRPF

Buenos días:

Mis clientes son casi todos empresas y mis facturas suelen ir con IRPF. Hasta ahora, no había tenido ningún problema, pero este año me he descargado mis datos fiscales y he comprobado que uno de mis clientes habituales no ha declarado el IRPF, a pesar de que mis facturas indicaban la retención. ¿Cómo me afecta a mí eso y a mi declaración? ¿Qué debo hacer? ¿Hacer la declaración con mis datos y tirar "p'alante", o solo debo usar los datos que me da Hacienda? ¿Quién es el responsable de ese IRPF impagado?

Cualquier consejo o ayuda al respecto será bienvenido.