对于心腹李卫，雍正曾直言“嘉许之怀，笔莫能罄”，君臣相知程度可见一斑。雍正去世时，李卫身兼兵部尚书、刑部尚书、直隶总督数职，是最为炙手可热的封疆大吏，故而乾隆即位后，也对这位父辈老臣给予重用。然而，乾隆与雍正不同，他虽赏识李卫的干练敏达，却忌讳其出身。正史中，李卫非科举正才，而是捐资入仕。
乾隆元年，李卫继续督n q k ! A管直隶，并且被拖入乾隆与三叔诚亲王胤祉的角力中。李卫会意，出面弹劾揭发胤祉的护卫，得乾隆赏赐团龙补服，此事之后，李卫忽一改常态，托病在府，= ) - : O T多次请辞被拒，后于乾隆三年病死? l & ~，李卫死后，乾隆下令以总督之礼厚葬。
常言道“人死魂灭”，令乾隆没有想到的是，多年之后，他竟然能重遇早已入土的“李卫”。乾隆南巡，非常醉心江南景致，- B q y H尤其是游览西湖时，好好的当了一回游客，一口气就住了` 0 * U r -12天，沿着西湖不停逛吃，不停吟诗作对。
《清史稿李卫传》记载，一时，乾隆走到西湖的花神庙，出于y m 2 u } u对花神的倾慕，乾隆进庙上香。说到这座花神庙，就不能不提李卫，因为这庙正是他在雍正九年修建的。乾隆虽然知晓此事，但步入庙堂后，却大惊、大怒。因为在这座花神庙的诸多神像中，竟然有李卫自己的塑像，旁边还有他的妻妾。
也就是说，李卫一家子都成神仙了，都在这花神庙受众生香火，臣子做出这等事，乾隆如何不惊诧。再 k 7 ` ? X / ~ !搭眼细看，李卫自己的塑像上，还刻着“湖山神位”几个字，还真把自己当成神) J 1 _ y了，乾隆立时大怒，命左右扑倒李卫一家的塑像，全部砸碎烧毁。
出了花神庙，乾隆越想越生气，专门下了一道招数，怒斥“李卫讬名立庙，甚f J X P K 6为可异！仰借皇考恩眷，任性骄纵，本非公正纯臣……”。可以想见，张廷玉年逾八十，还被乾隆抄家，若李D ; B ^卫跟其一样长寿，日子也不会太好过，只是这讬名立庙之事，还真是李卫不知高低深浅。