冬天天水街亭温泉并不会冷。温泉的水温通常较高，一般在30摄氏度以上，因此即使外界温度较低，泡在温泉里仍然会感到温暖舒适。此外，许多温泉度假村或温泉酒店都会提供毛巾、浴袍等物品，以确保游客在泡温泉时不会感到寒冷。

当然，如果您担心在前往温泉的途中会感到寒冷，可以选择穿着保暖的衣物和鞋子，或者选择自驾前往，以便在车内开启暖气。在泡温泉之前，还可以先喝一些热水或热茶，以帮助身体适应温度。

总之，冬天天水街亭温泉并不会让人感到寒冷，反而是一种温暖舒适的体验。不过，为了避免不必要的风险，建议在前往温泉之前先了解当地的天气状况和温泉的开放情况，以便做好相应的准备。