Вообще, сейчас продается специальный утепленный линолеум, и самому делать ничего не нужно, но раз у Вас такая проблема, то действуйте следующим образом. Нужно снять плинтуса, аккуратно отодрать линолеум от основания, и на основание положить утеплитель (это либо плиты минеральной ваты или плиты экструдированного пенополистирола), механически закрепите, и постелите Ваш линолеум обратно, так же приделав плинтуса. В принципе, ничего сложного, зависит только цена от того, какой утеплитель Вы выберите.