2004年李彩桦与正东唱片公司合约到期,当时风头正劲的李彩桦收到了很多有实力公司抛来的橄榄枝。经过深思熟虑她选择了与寰宇签下8年合约,也正是这个合约,让她陷入了水深火热之中。虽然,当时李彩桦只有21岁,但是却十分有自己的主见和立场。公司为了获得利益的最大化,竟然要求她接受潜规则,遭到李彩桦的一口拒绝,她明确表示,即使退出娱乐圈也不会做出对不起家人,朋友的事情。她的这一番话彻底激怒了公司老总,当然也逃不过被雪藏的命运。因此,那几年很少会有李彩桦的消息,经过几番周旋,李彩桦与公司达成分手合约。对香港演艺圈心灰意冷之后,李彩桦决定到内地发展。2006年,李彩桦与罗嘉良合作出演中央电视台制作的电视剧《昭君出塞》,饰演女主角王昭君,也正是因为这个角色让内地的观众认识她。随后又出演了多部热播大剧,包括民国情感剧《锁清秋》饰演江雨萍,民国大戏《大丫鬟》饰演沈流云,出演王珞丹主演的电视剧《杜拉拉升职记》饰演“黛西”等。