居正等人劝住了，步子太大容易扯着蛋，张居正等人贱民一事，由来已久，一朝革除显然是不合理的，他们认为部分豁除是最佳方案。
然后君臣们就开始商量应该豁除哪些人的贱籍，首先是因事被堕入贱籍的那些人，尤其是太祖、成祖两朝因为犯罪被堕入贱籍的人，这点朱载坖和臣子们都是同意的，毕竟现在时间已经过去了两百年，就算是惩罚，也差不多了，这点是没有什么争议的。
其次就是胥吏，这点朱载坖和重臣们也是没有什么分歧了，毕竟现在朱载坖实行三途并进，由吏员升迁为官的在朝廷中也有不少，总不能让他们还是贱籍吧？这未免太失体统了，虽然吏胥也分为吏、役两种职役，吏员严格意义上来说并不能算是胥吏，但是他们毕竟是为官府服务的，还是贱籍也有不妥，所以将胥吏的贱籍一体豁除，也是应当的。
但是对于其他的贱民豁除，就没有那么和谐了，首先是娼优，这个行业实在是太过于古老了，来源也很复杂，朱载坖也很清楚，不可能全部豁除，一旦豁除，是会造成社会动乱的，朱载坖认为除了娼妓之外的都予以豁除，但是张居正等人不同意，认为仅仅豁除因事被堕入娼优的。
朱载坖明白他们说的因事，其实还是说的太祖、成祖朝的旧事，尤其是成祖，当年的建文旧臣，成祖对他们加族诛、掘塚，妻女发浣衣局、教坊司的，大有人在，建文旧臣的妻女多充当乐户，且主要是被发往山西，她们的后人多散落民间，成为民间乐户，其中有技艺出色者，也被调往京师教坊司，充当官方乐户。
张居正他们认为将一部分的贱籍予以豁除就可以，对于其他的娼优的贱籍，没有必要豁除，朱载坖则认为这样做的针对性太强，朱载坖不能公开反对太祖、成祖的政策，他的意思是将整个乐户予以豁除，
朱载坖觉得，乐户是贱民，世代从事贱业，不得改业，特别是罪臣家属，作为一项惩罚手段，一旦罚为乐户，世世代代不得改业，永世得不到翻身的机会，这事过于残酷，应当予以废除。
张居正说道：“豁贱为良，天恩何等浩荡，若将所有乐户一体豁除，是否有过于泛滥了。”
朱载坖说道：“些许乐户，为何不能豁除？既是天恩，能泽被苍生才好呢。”
在朱载坖看来，这次豁除贱籍，就要大规模、大手笔，才能够体现朝廷变易风俗的决心，不仅是乐户，朱载坖的重点是奴仆，尤其是关于士绅们家中以义男、义女、雇工等各色名目的奴仆，都要予以清理，不允许他们再蓄养奴仆了。
但是这点被重臣所反对