江德福离婚的原因主要是因为他的前妻张桂兰出轨了他的二哥。江德福在与张桂兰结婚后不久就离家去当兵，而张桂兰在家中寂寞难耐，最终与家中的残疾二哥发生了关系，并且生下了江昌义。当江德福探亲回家时，意外撞破了他们的私情，愤怒之下将张桂兰赶了出去。二哥因为羞愧而离家出走，最终死在了矿难中。
尽管江德福对张桂兰并没有深厚的感情，但考虑到江家的颜面，他并没有声张离婚，而是默默承受了这一打击。直到安杰50大寿时，江昌义不请自来，才道出了这个隐藏多年的秘密。
因此，江德福离婚的主要原因是张桂兰的出轨行为，以及这一事件对江家带来的巨大影响。