Viedma encargó al comandante de la tropa, oficial de infantería José Martí, que inspeccionará la banda norte a fin de proceder al traslado de fuerte y población. El día 15 de junio estaba, acompañado por el piloto Manuel Bruñel, el sargento José Michán y un conocedor de la zona llamado José Puche, buscando lugar apropiado para levantar definitivamente el establecimiento.
Ese mismo día 15, en horas de la tarde, se inició el trabajo de echarse abajo las estacadas de la fortificación del sur y el 16 se construyeron balsas de madera; el día 19 se empezó el traslado de los materiales de una orilla a otra. El día 20 ya se estaba en condiciones de iniciar la tarea de levantar el fuerte en la banda norte y tanto se trabajó en el que a principios de agosto "toda la gente estaba cubierta en ranchos provisorios de palo a pique, juncos y techos de paja".
La soledad y el peligro aconsejaron a Viedma la construcción de un fuerte más sólido aprovechando la piedra hallada en una cantera situada a pocas cuadras del lugar elegido. El ingeniero José Pérez Brito fue el encargado de la obra. Una muralla en cuadro de 66 metros con 80 centímetros de lado por 3,675 metros de alto y 0,835 de ancho limitaba el recinto fortificado.
El almacén para la custodia de los víveres, la capilla, otras dependencias y la hermosa torre atalaya se hicieron también de piedra (arenisca o tosca mora como se llama comúnmente).
La banda sur, al parecer, no fue abandonada totalmente, sino que fue utilizada para resguardo de las caballadas.
Fuente: Municipalidad de Carmen de Patagones.
