外れます。ていうか外れないと張替えできませんw。
建具屋によっていろいろなタイプがありますが、ウチ辺で普通のは、
1上から見て下の段のはまってる右か左に隙間がないか見ます。あればそこにバネが入っています。
2バネの隙間が反対側の溝より大きいタイプは、下の段をバネのほうへ押し付けただけで外れます。
3下の段を引き上げます。バネが入っているほうの溝に針をさしたような跡がありませんか？。
4あれば目打ちを刺して内側に引っぱります。薄い木の棒が外れます。
5下の段を下げて薄い木の棒のはまっていたところに押し付け外します。

建具屋によって仕様が違うので以上と違うかも、観察してみてください。