普通はUARTに対してオシレータのクロックが十分小さいので問題ないと思う。
1バイトごとのスタートビットでズレは解消されるので、累積は10bit程度