有一次，刘邦与韩信在宫中闲聊品评朝中诸将的优劣，韩信认为这些将军都算不上一流水平。刘邦突问韩信：“你以为我能带多少兵？”韩信说：“陛下只能带十万兵而已。”刘邦反问：“那你能带多少兵？”韩信十分自负地回答：“多多益善。”刘邦一听，笑道：“你认为自己如何厉害，怎么就被我抓起来了呢？”韩信道：“陛下不能将兵，但能将将。所以，我为你所擒。”
此次谈话之后，刘邦的心病更重了：此人如此狂傲，一旦自己归天，孱弱的儿子刘盈是制不住他的。于是，韩信的死期就快要到了。
顺便插一句，樊哙是韩信的老部下，每次上朝见到韩信，总是说：“臣拜见大王。”跪拜接送不止，而韩信总是不屑一顾，对人说：“大丈夫怎能与樊哙这种屠户为伍。”樊哙听后，恨得咬牙切齿。因此，朝中大臣对韩信是既怕又恨。
公元前206年，刘邦在长安称帝。在刘邦看来，对于他的新兴政权尤其是他死后的刘姓王朝最具威胁的，莫过于被他称为汉初“三杰”之一的韩信。
称帝刚结束，刘邦为防韩信当齐王时间长了，根基扎稳了，对他不利，就把韩信由齐王改封楚王。因为韩信太能用兵了，所以封楚王不久，刘邦还觉得不放心，就想削掉韩信的楚王封号。
罢人家的官，总得找个由头。于是刘邦就暗中指使人上告韩信谋反，以伪游云梦之计，把韩信捉入长安，贬为淮阴侯，放在自己眼皮底下看管起来。可时间一长，刘邦觉得韩信这样的人即使在京城，也是个隐患，就开始对韩信下手了。
汉高帝十一年，在代地的陈豨谋反，刘邦亲率大军平叛。临行时，他妻子吕后哭哭泣泣地说：“你远离京城，一旦祸起萧墙，怎么办？”刘邦想了想说：“天下刚平定，谁会造反？如要出问题，定是韩信。此人功高才大，被削职闲居，牢骚最多。”并交代吕后，有事找萧何，因韩信是萧何请回来的，两人感情较好。