据史料记载,明万历九年(公元1582年),土默特蒙古部阿勒坦汗死后,其子僧格都楞继承了汗位。他执政后,效仿他父亲的作法,决定邀请三世0索南坚措到内蒙古右翼各部传播宗教。三世0接受了他的邀请。为了迎接索南坚措三世0的到来,僧格都楞于万历十二年(公元1585年)为他建立了这座小-庙--席力图召。后在清康熙、雍正、咸丰和光绪年间,经不断扩建和修缮,成为呼和浩特地区规模最大的-教寺院,并掌握着这个地区的黄教大权。召庙建筑宏敞,风格独具.虽经四百年风雨和-,仍保留较完整。
世0来到呼和浩特传教期间,西藏方面派高僧希迪图噶卜楚专程来看望他。1588年,0三世圆寂,死前他留下遗嘱,命令希迪图噶卜楚替他坐床传教,并指示在办完舍利(遗体)事宜后,到东方寻找他的呼毕勒罕(转世)。希迪图噶卜楚遵从他的旨令,在席力图召坐床,并负责蒙古右翼地区的佛教事务。公元1589年,希迪图噶卜楚同右翼蒙古封建主商量,选取阿勒坦汗之孙嘉云登坚措做了四世0,希迪图噶卜楚亲自给四世0讲授佛教经典,一直把四赖教养成人。
于明万历三十年(公元1602年),由希迪图噶卜楚护送四世0到西藏举行坐床典礼。传说在典礼仪式上,希迪图噶卜楚曾坐在0-的法座上,法座的藏语名称席力图,他被称为席力图呼图克图。返回呼和浩特以后,希迪图噶卜楚便将他主持的寺庙改名为席力图召。这位希迪图噶卜楚就是席力图一世。为了报答希迪图噶卜楚的执教之恩,四世达鞍曾授于他“乌汝勒克、班弟达固巧尔气”的称号。
席力图一世-希迪图噶卜楚熟悉蒙、藏、汉三种文字,精通佛教典籍,曾将藏文《般若经》译成蒙古文。
现今所见的席力图召内建筑群,是采用中原传统的布局,即从山门到大殿形成一条中轴线。两侧对称布置侧殿、仓房、碑亭、钟鼓楼。寺内建筑凡五进,山门前还建有木牌楼。由经堂佛殿组成的大殿,为寺内主要建筑,佛殿已在解放前遭火灾焚毁。