古北水镇御大温泉和城大温泉都是室内温泉。这两个温泉都位于水镇内部的建筑物中，游客可以在温暖舒适的室内环境中享受温泉的乐趣，无论是在冬季的寒冷天气还是夏季的炎热天气都能够尽情放松身心。此外，室内温泉还提供了更多的便利设施，如更衣室、淋浴间和休息区，让游客能够更好地享受温泉之乐。因此，古北水镇御大温泉和城大温泉都是室内温泉。