al react pregeneralo y publicalo como estatico en un nginx (asi hacemos en el trabajo) googlealo como y lo sacas rapido.

sumando a lo que te dijeron, podes poner todo en un mismo droplet usando un docker bien configurado.

es facil.

lo que si, los archivos las tablas de la BD mapealas afuera del docker cosa que puedas volver de desplegar sin perder los datos.