三脊茅草、东海的比目鱼、西海的比翼鸟，然后祥瑞的灵物就会不召而至。现在凤凰和麒麟没有出现，佳美的谷物也没有生长出来，田里杂草丛生、乌鸦乱飞，这样的情况岂可封禅！”齐桓公无言以对，只好作罢。心中的无奈，何人可知？
齐桓公虽然并没有真正将封禅付诸实践，但是此事说明齐桓公的野心已经越来越大，而且被自己取得的成果冲昏了头脑。在这样的情况下，齐国的霸业走向衰落。
葵丘之会以后，齐国的霸业虽然已经逐渐衰落，但仍然维持了一段时间。鲁僖公九年（公元前651年）九月（由于《春秋》是按照鲁公纪年，故而研究春秋历史的著作多用周王纪年或鲁公纪年），晋献公去世，晋献公指定因为受宠而被立为夫人的骊姬之子奚齐继承国君之位。晋国的大夫里克认为奚齐的君位得来不正，心中不服，于是纠集党羽杀死了奚齐，而后骊姬妹妹的儿子、奚齐的弟弟公子卓即位为国君，又被里克等人杀死。晋献公的几个儿子死的死、逃的逃，晋国从此群龙无首，陷入内乱之中。
齐桓公见此情况，便召集各国诸侯会师伐晋，来平定晋国的叛乱，大军到达高梁（今山西临汾东北）之后就回去了。里克杀死奚齐和公子卓之后，派人迎接流亡在外的公子重耳回国即位，重耳婉言谢绝，里克转而迎接同样流亡在外的公子夷吾回国。夷吾一方面又想回国，一方面又担心其中有什么阴谋，于是派人到秦国请求援助，以即位之后割地给秦国的承诺换取秦穆公派兵送他回国。
后来秦穆公果然派军护送夷吾回国，作为霸主的齐桓公也派出了齐国大夫隰朋率领部队与秦军会师，共同护送公子夷吾回晋国。第二年四月，隰朋与周天子派来的周公忌父和王子党共同在晋国立公子夷吾为晋惠公。这是黄河上游的秦国第一次与黄河中下游的诸侯国正式发生政治联系，而且也可以看出齐国此时仍然实力鼎盛，有能力参与与之不相伯仲的晋国的废立之事。
不久以后，狄人再次来袭，灭掉了温国，温国的国君逃到了卫国，狄人也继续入侵，袭扰卫国、郑国。这时齐桓公并没有像往常一样召集诸侯，大张旗鼓地去讨伐狄人，而是联合许国一起讨伐了北戎，以此牵制戎狄的入侵。
鲁僖公十一年（公元前649年）夏，之前与周襄王争夺王位失败的王子带不甘心接受失败的结局，于是勾结了扬邑、拒邑、泉邑、皋邑以及伊、雒一代的戎人进攻周王的京城，焚毁了王城的东门。秦穆公听说这个消息，赶快集结军队，联合晋惠公共同带军前来救援周天子，齐桓公也派了管仲和隰朋代表周王室和晋国前来与戎人进行和平谈判，多方合力之下，戎人终于退兵了。
由于齐国之前的拥立之功，周襄王本来就对齐国很有好感，现在管仲又在平定戎乱中立下大功，于是周襄王感激地以上卿之礼设宴款待管仲。管仲很惶恐地推辞说：“臣是齐国小臣，职卑位贱，没有资格享受上卿的礼仪。”周襄王说：“我是为了嘉奖你的功勋和美德，不必推辞了，不要违抗我的命令！”管仲见推辞不过，但毕竟不敢太过违背礼制，就采取了折中的办法，按照下卿的礼仪参加了宴会。后来有人称赞管仲说：“管仲如此谦恭退让，立下大功也不轻视王上，他能够享受世代香烟祭祀实在是理所应当的。”
但是周王室的危机并没有就此解除，淮河一带的夷人不断侵扰杞国，同时也对周王室也造成了威胁，而戎人虽然退走，但始终对中原虎视眈眈。为了保护周王室的安全，齐桓公派出仲孙湫到周去任职以及时处理相关事宜，并且邀集诸侯在鹹地集会，召集诸侯的军队到周王畿去戍守防御。
正在周王室危机不断的同时，南方的楚国也蠢蠢欲动。随着楚国的逐渐兴起，在南方拥有强大的势力，周边各个小诸侯国都要奉其为尊，但是一次楚国召集各诸侯国君聚会，黄国不愿服从楚国，就参加了齐国为防御、讨伐楚国而举行的齐国、宋国、江国、黄国四国会盟。后来齐国势