乌古和党项等地，那时候，耶律倍都是统帅千军万马的先锋官，并且能够经常为其父出谋划策，深得耶律阿保机的宠爱，被封为东丹王，掌管渤海国的原班人马和领地。

耶律倍还有很高的文化修养，尤其擅长绘画，他的绘画作品东丹王出行图在后世里被收藏于美国的波士顿美术馆。那张画是表现人物鞍马内容的作品，画中绘有六个人，都是骑在骏马上，他们的衣冠、服饰和佩饰全都因身份的不同而各异。此外，耶律倍还精通音律，熟悉医药，能用契丹文和汉文写文章，促进了契丹和汉人文化的融合。

年仅十八岁时，耶律倍便被立为契丹的皇太子，他汉化的程度很深，尊孔尚儒，主张契丹人全盘汉化，以儒家思想为治国之术，耶律倍提出，“孔子大圣，万世所尊！”，他认为契丹人要想强大起来，必须接受儒家思想的教育，辽太祖耶律阿保机很欣赏这个儿子，立即慨然应允，开始在契丹境内大兴土木兴建孔子庙。

可惜好景不长，耶律阿保机突然驾崩，临朝称制掌握大权的述律太后则主张维护契丹的奴隶制度。所以，述律太后支持耶律倍的弟弟耶律德光继位。

耶律倍最终成为了皇权争夺的失败者，后来，他遭到了耶律德光的监视和排挤，他们兄弟两人之间的关系不断恶化，矛盾越来越深。耶律倍不得不离开契丹，投奔了后唐皇帝李嗣源。李嗣源以子仪仗迎接耶律倍，并给他赐名为李赞华。至于追随耶律倍来到后唐的其他人，则分别被赐姓为穆、罕、罗、易、盖等汉姓。