你好，根据你提供的情况来看，在没有受到外力损伤的前提下膝盖冰凉可能是受寒湿所致。
若膝盖遭受风、寒、湿就会出现寒凝血脉，感觉寒冷，建议你注意腿部保暖避免受寒，冬天佩戴护膝，也可以上上热敷或者用远红外烤灯理疗，促进局部血液循环，症状逐渐就会消除的。
以上是对“双腿膝盖关节很冷很冰凉”这个问题的建议，希望对您有帮助，祝您健康！
从你的情况来看，是由于，身体肾阳虚造成下肢血液循环不好，引起的还有可能是膝关节骨性关节炎造成的
是需要去医院骨科检查一下膝关节的x光片看看如果是膝关节的问题可以使用金不换膏外敷治疗如果是肾阳虚造成的就需要服用金匮肾气丸和壮腰健肾丸治疗才能够好转注意下肢保暖
中医考虑为风寒湿三气积聚关节引起的痹证，寒性收缩，湿性粘滞，风挟寒湿行至关节，郁而不行。
可选用中成药中成药右归丸内服配用伤湿止痛膏外用，散寒除湿，通络止痛，服药期间禁食生冷食品。