壁の材料によると思うけど心配してるほどのことはないんじゃないかと思いますよ。
床と突っ張り棒の間に板挟んで荷重を分散させたり間隔を広めにとるとか、どうでしょう?