按汉制，李严的中都护是没有军事大权的，反而是司隶校尉有监察之权。另外，李严的尚书令本为九卿之一的属官，掌管皇帝收发公文书函，而诸葛亮的录尚书事则为加衔，也就是超越尚书台，总领台阁诸事。最后，汉末三国地方权重，州牧刺史更具影响力，就地方职称而言，孔明以领益州牧，已为地方大员。
事实就是，李严远在永安，距离成都甚远，仅这一点就对李严坚守岗位的职责造成非常大的打击。首先，光禄勋是卫队长，他应该时刻在皇帝身边，可李严却无缘兵巡皇宫，只能驻留边境，实质上不可能尽职护卫皇帝。其次，尚书台为处理皇帝奏章等文书的官职，若是尚书令人不在皇宫附近，所有文献、函令及奏章更不可能由远在天边的李严经手，因此李严的尚书令更无法实地掌握尚书台各项事务。最后，中都护本来就是边将，担任这个职位的人根本就无法影响到中央。因此李严的光禄勋、尚书令及中都护都无法发挥应有的作用，全拜留守永安之赐，李严身兼此三官职，却为名存实亡。更何况李严位处边陲，即使皇帝有事发生，他也不可能在有效时间内赶到。确切地说，他完全被赶出了中央。我们通过以上分析可以确定的一点就是：刘备根本就没打算承认李严辅臣之实，他让李严空顶着辅臣的帽子，不过是为了稳定当时的局势。
可李严并非是逆来顺受之辈，如果说，他不明白这是刘备奸诈的话，那么，在刘备死后，诸葛亮独揽朝中大权就让他极为不舒服了。
事情该从他驻守永安时说起，在这期间，发生了几件很不寻常的事。第一件事是，益州从事常房去南中巡视，但他在巡视途中却不宣传他上司诸葛亮的教令，却以都护李严的书信去晓谕益州郡各大姓家族。第二件事是，李严的好朋友孟达投降魏国以后，很为魏文帝曹丕所倚重，两人互有书信往来。李严这个人在三国时的名声并不好，他历事三刘(刘表、刘璋、刘备)，朝秦暮楚，当时，他率军镇守蜀国的东大门，如果他像当初投降刘备一样投降曹魏，蜀国的前途不堪设想。这些征兆首先就引起了诸葛亮的重视。
第一件事可看做是李严在与诸葛亮争夺权力;而第二件事则完全可以看做是李严又犯了三心二意的毛病。
但是，诸葛亮毕竟顾忌李严。首先，李严并非好惹之辈;其次，诸葛亮自己正在为蜀汉王朝开疆拓土，无暇顾及。226年，李严被调往江州，到了这个战略要地后，他多年来对中央政权和诸葛亮的不满开始发泄出来。
首先，他在江州修筑大城，周围十六里，修建苍龙门和白虎门，还计划在城西十里处凿通后山，汇通两江，建设一个新城市，作为他的势力控制的据点。同时，他要求诸葛亮把五郡划给他建立巴州，由他担任巴州刺史。紧接着，他又希望中央政府允许他开府治事。要知道，当时在蜀国，只有丞相诸葛亮一人才有这个资格开府治事。
无数事情都让诸葛亮感觉到，如果不把李严除掉，迟早有一天，他不但会飞走，并且还会掉过头来咬蜀汉政权一口。诸葛亮猜得没有错，当李严手握蜀国四分之一的重兵后，他就开始违抗中央的命令，并且对诸葛亮派来的人故意冷落，进行排斥。
这个时候的江州俨然已成了一个独立的政治军事中心，要同蜀国的中心成都分庭抗礼，平分秋色。李严能发展得这么快，完全是靠着刘璋旧部的身份。诸葛亮与李严的关系也成了当初西周周公主陕东、召公主陕西，二公分陕而治的势态。
诸葛亮当然不同意，他做了周密部署，开始向李严进攻。首先，在230年，他上表晋升江州都督李严为骠骑将军，并命令他带领军队两万人前往汉中。同时，又任命李严的儿子李丰继任江州都督，办理善后事宜。李严找不到任何借口来推辞，并且也没有必要推辞，在他看来，江州还在他姓李的手里。他只好按照皇帝的命令到达汉中，诸葛亮就命令他留驻汉中，署汉中留府事。
第二年，诸葛亮第四次北伐，让李严负责供应军需物资。但事情就出来了，有人告李严施展欺上瞒下、弄虚作假的手段，企图诬陷诸葛亮。李严的“罪行”被揭露后，诸葛亮“当机立断”，联合高级官员二十二人上表给刘禅，将李严削职为民，流放外地。老于世故、才能出众的李严会犯这样愚蠢的错误，简直是扯淡。
接着，诸葛亮夺去了江州都督李丰的兵权，重新任命了江州最高指挥官，从此后，江州这个战略要地才真正回到了蜀国政府的掌握之中。
而随着江州的归来，刘备的政治遗嘱也宣告了破产。这个中国历史上表面看上去最温和实质却最狡诈的皇帝的政治遗嘱从开始就注定要破产，他让李严作为辅臣之一，不过是想安抚刘璋的旧部，但诸葛亮彻底打破了这种安排。后来，蜀汉政权的灭亡仍旧是由新人(刘备这一面的人)和旧人(刘璋那一面的人)的矛盾激化所导致的。
而诸葛亮最终也没能完成刘备的政治遗嘱，他最终失败了，失败的原因非常简单。
