辩才和他的弟子们的信任，可以自由来往。有一天，萧翼得知辩才外出，趁机来到寺里，对老和尚的徒弟说，有两本书，搁在老和尚屋里了，要取回去，那些徒弟就叫他自己去取。萧翼就把书桌上辩才的《兰亭集序》和他带来的那几件墨宝一起拿走了。
出了寺门，萧翼立即找到当地的官府，亮明了身份，说明了事由，并让人请来了辩才。此时的辩才还在别人家里作客，听说御史召见，连忙赶来，一看这位御史就是自己的好朋友萧翼，再一听圣旨，知道《兰亭集序》序已被偷走，当时就惊倒在地，很久才醒过来。
萧翼弄来了《兰亭集序》，唐太宗非常高兴，分别奖赏给房玄龄和萧翼许多珍宝器玩，还给他俩升了官儿。对于辩才，唐太宗油也没有打击报复，而是下令赐给他许多钱物作为补偿款。但辩才无心享用这笔巨款，而是用来造了三层精美的宝塔。
辩才因为这件事怒急攻心，深感愧对先师，后来慢慢地吃不下饭，只能喝点粥，一年多之后，辩才就去世了。