Прежде всего, необходимо собрать каркас, к которому будут крепиться листы гипсокартона. Каркас лучше всего сделать из металлического профиля, деревянные бруски здесь не рекомендую использовать, т.к. они будут деформироваться из-за температурных колебаний.
Поскольку ниша снизит теплоотдачу батареи, рекомендую добавить к имеющемуся радиатору дополнительные секции, а поверхность стены за батареей закрыть фольгоизолом.
После сборки каркаса, останется нарезать гипсокартонные листы по размеру, прикрутить их к профилю и заделать стыки шпатлевкой.
Вот, в принципе, и все.
