噂話レベルの情報から推測しちゃうと、当時事務所側がギャラアップ交渉して、それが受け入れなくて降板って印象にしかならないんだよね。
この方の公式HPの仕事リスト見ても、某公共放送とトラブルになる前からTVアニメ系の仕事減ってる感じになってるし、
その時期が事務所移籍された後って感じでも有りそうだから、結局新事務所がギャラ交渉の失敗か何かで、新規仕事が減っただけってのにも、ある程度説得力の有る話になってるわけで。
そのギャラ交渉の失敗も、確かに上の立場からの圧力ってなる可能性も有りそうだけど。