便将此事写信告诉了曾国藩，要求他发话来摆平不识好歹的邻人。而曾国藩收到书信之后回了一封长信，信中附上了张英的诗作，劝说家中的子弟要心胸开阔，“让他三尺又何妨”？因为这三尺之地，让邻人反目，成曾家恶名，又怎么值得呢？按照他的指示，曾家主动退缩了地界，给邻居方便。而邻人看到曾国藩居然能做到如此忍让，也大受感动，将自家的宅基转让给曾家扩大黄金堂新宅。

    不管是在官场上与比自己强势的权贵打交道，还是在乡间与自己的邻居打交道，曾国藩所坚持的原则都是相同的，在无伤原则的时候以宽忍为怀，凡事让人三尺，这成为曾国藩以退为进的处世秘方。

    因曾国藩的教导，曾家的家风一时之间为当地人所称道，曾家的子弟在乡里也成为谦逊的榜样。但由于子弟诸多，其中难免会有依仗权势行恶之徒。曾国藩知道地方官都害怕京官，所以一再告诫自己的家人不要轻易去干预地方官的行政命令。可是他的弟弟曾国潢却一直都听不进去，在乡里横行霸道，多次干预湘乡知县的政事，引起了人们的怨恨。

    同治年间，湖南各地兴起了“哥老会”，尤其是在曾国藩的家乡湘乡县，原来参与过湘军的人被遣散回乡，大多参加了“哥老会”，形成一定组织为害乡里。曾国潢对于这种组织非常反感，积极参与当地县衙组织的剿灭行动，而他暴躁的脾气在这个过程中日渐增长，遇到了自己憎恶的人就会捆绑到县府之中，要求知县将其判死罪。湘乡县令是一个佛教徒，本以慈悲为怀，但曾国潢家世显赫，每次他有所要求，县令又不敢不从，因此良心受到了极大折磨。有时候曾国潢会一次性捆绑五六十个人，要求县令判死刑，到最后也很难有人生还，县令总是悲戚地说：“曾四借我的手杀人！”