杨可才一说完，汉武帝就勃然大怒。先有杨可告缗取得天下之财充盈国库，这让汉武帝非常高兴，而义纵这时候却因为迟道未休整而让汉武帝心生芥蒂。这一下更是让汉武帝感觉到义纵公然反对自己，原本汉武帝看重的干吏，这时候却成了厌恶的对象。
“苏文，传朕旨意立刻逮捕义纵，并让让廷尉正杜式严加审理。内史之职暂由廷尉杨可代理。”汉武帝当即就下了旨意，义纵是彻底的下台了，而杨可则成了真正的赢家。
几天之后，廷尉正杜式就了解了义纵的案子，昔日位高权重的右内史，如今已成阶下之囚，而杜式本就是杨可的下属，这次给义纵定的罪名可是一点都不小。破坏执行诏令之罪，这就是公然与皇帝为敌的罪名，其罪当诛。而汉武帝这一次异常爽快的批准了义纵的罪行，与以往袒护义纵的情形完全不同。
廷尉府的牢房之中，义纵一身囚服面对着墙壁。当他知道自己的结局时，没有表现的如何激动，只是看得出眼中神色黯然，仿佛瞬间心灰意冷了一般。只听义纵喃喃自语的说道：“终究只是一枚棋子，也到了弃之无用的时候了。今生为人问心无愧，死有何惧？”
义纵说完这些话，就忽然站起身来，而后猛地对着墙面一冲，下一刻义纵的脑袋就撞击在坚硬的石块墙面上，瞬间鲜血横流，不过片刻就断了气。
最终义纵没有走上刑场就结束了自己的生命，这种死法在西汉时期倒也流行，许多获罪的重臣为了给自己留下最后一点体面，都是在狱中自杀的。以前的李蔡是这样，现在的义纵是这样，以后的张汤也是这样。
义纵的死并没有引起什么轩然大波，不过在长安一处普通的府邸中，一个二十七八的青年正铺开一卷竹简，在上面用刀笔刻画着。此刻他刻的这枚竹简上，赫然就有义纵的名字。此人就是当今太史令司马谈之子司马迁。
在司马迁手上有很多这样的竹简，每一片竹简都记载了当朝一位重臣，那些已经死去的司马迁就将竹简记录完整，而后保存起来，今日义纵已死，司马迁便将属于义纵的竹简补充完整。
当司马迁写完义纵的死因后，他停下刀笔露出一副深思的神情，又过了许久，司马迁重新拿起刀笔，又在义纵竹简的末尾多刻了几个字。
“虽惨酷，斯称其位”最后七个字落下，司马迁吹了一口气，将竹简上的粉末吹散，而后小心翼翼的将竹简收入到一个木箱之中。
类似于司马迁这里的一幕，此刻在甘泉宫竟然也上演着。不过在甘泉宫的不是竹简，而是一副宽大的布帛。这块布帛就是原本挂在未央宫静室之中，只有汉武帝能看到的那块。每次汉武帝离开未央宫，不管是去上林苑，还是来甘泉宫，这块布帛他都会带在身边。
而当义纵自杀于廷尉监狱的消息传到甘泉宫时，汉武帝再次拿出了这块布帛，在义纵的名字上画了一个圈。
做完这个动作，汉武帝并没有立刻收起这块布帛，而是将目光移向了其他地方，最后目光落在的地方，正好是霍光的名字。。