La ciberseguridad física es vital para proteger la infraestructura informática clave contra los ciberataques. Individuos, corporaciones y la sociedad pueden sufrir considerables pérdidas de activos digitales debido a los ciberataques, incluida la pérdida de datos, robo, pérdida financiera, daño a la reputación, interrupción de la empresa, daño a la infraestructura, ataques de ransomware y espionaje. Un ataque ciberfísico daña tanto activos digitales como físicos. La seguridad del sistema ciberfísico es más desafiante que la ciberseguridad a nivel de software porque requiere inspección y monitoreo físico. Este documento propone un algoritmo innovador y efectivo para fortalecer la ciberseguridad ciberfísica (CPS) con una intervención humana mínima. Es un enfoque basado en el reconocimiento de actividades humanas (HAR), donde se ha utilizado la hibridación de la red GoogleNet-BiLSTM para reconocer actividades sospechosas en el perímetro de la infraestructura ciberfísica. El algoritmo HAR-CPS propuesto clasifica actividades sospechosas de la vigilancia de video en tiempo real con una precisión promedio del 73.15%. Incorpora visión artificial en la tecnología de borde de IoT (Mez) para hacer que el sistema sea tolerante a la latencia. Se ha garantizado una seguridad de doble capa al operar el algoritmo propuesto y la red híbrida GoogleNet-BiLSTM desde un servidor en la nube, lo que asegura la seguridad del sistema de seguridad propuesto. El innovador esquema de optimización hace posible fortalecer la ciberseguridad ciberfísica por solo USD al mes.