En los últimos años, la realidad virtual (VR) ha alcanzado su nivel de madurez para ejercicios prácticos reales en muchos campos de estudio, especialmente en el sistema de exploración de patrimonio cultural (CH) a través de recorridos virtuales. Sin embargo, este estudio sigue estando disperso y limitado. Este trabajo presenta una revisión sistemática que mapea los problemas de usabilidad y accesibilidad que representan un desafío en el uso de VR en CH. Identificamos 45 desafíos que se agrupan en cinco categorías de problemas: diseño del sistema, proceso de desarrollo, tecnología, proceso de evaluación y transferencia de conocimiento. Este mapeo se utiliza para proponer 58 recomendaciones para mejorar la usabilidad y accesibilidad de VR en CH, que se categorizan en tres grupos de recomendaciones diferentes, a saber, descubrimiento y planificación, diseño y desarrollo, y finalmente factores de evaluación. Este análisis identificó la persistencia de ciertos problemas de accesibilidad y usabilidad, como la limitación en la navegación de la vista y el espacio que restringe el movimiento libre de los usuarios y el control de navegación no es ideal con el botón de flecha del teclado. Este trabajo es importante porque proporciona una visión general de los desafíos basados en la usabilidad y accesibilidad que se enfrentan al aplicar, desarrollar, implementar y evaluar VR en la digitalización de CH, y propone un gran número de recomendaciones constructivas para orientar futuros estudios. La principal contribución de este documento es el mapeo de los desafíos de usabilidad y accesibilidad en categorías y el desarrollo de recomendaciones basadas en los problemas identificados.