振り子の振幅運動が小さくなっていく方向が時間の進む正方向なのだよ。
基底状態の原子振動は変わらないから時間の進む方向は正負どちらでもよい過去も未来も無い。