不过这种所谓的“堕民、疍民、丐户”等等只是民间风俗形成的歧视，并不是法律规定的贱籍。穆敬岩就直接从军因功成为了军官，顾炎武、屈大均书中也提到疍民洪武年间就被编为水军，选拔了其中勇武者为军官。疍民受教育的机会少，文化水平低，不过到晚明也已经有人通过科举为官，并没有法律层面的限制。
明代法律规定的贱籍只有奴婢、乐户和娼妓，不过景泰年间《大明会典》就规定允许脱籍从良。网上有些以讹传讹的谣言说满清雍正废除贱籍，大概是指雍正对浙江堕民、九姓渔民、丐户批示“准令除籍改业”，可是无厘头的是这些群体之前就不是法律规定的贱籍，除个屁籍？这不仅不是废除贱籍，相反是扩大法定的贱籍范围。
后来乾隆对这个批示作为司法解释“山西、陕西之乐户，浙江之丐户，虽编籍由来无可确据，而其相仍托业，定属卑污。雍正元年因御史年熙噶尔泰先后条奏，准令除籍改业，得业良民，正所以杜其邪僻之路，非即许其厕身衣冠之林也”，这里明确承认“编籍由来无可确据”，本来不是贱籍。“准令除籍改业”以后，反而限制了他们“非即许其身衣冠之林也”，增加了原本没有的禁止当官的条款，按乾隆的这个解释，雍正根本不是什么废除贱籍，是增加了法定贱籍人群。
到了浙江杭州以后，找一个客栈包下一个院子暂时住下，沈飞就让彭莹玉去购置了几处房产作为落脚点。有明有暗，暗处用作紧急时的安全屋。胡青牛长期隐居蝴蝶谷钻研医术，在安徽本地还好，到了别处，社会活动能力并不强。倒是彭莹玉作为散人，四处联络反元，虽然这是《倚天》世界，这些事情也是他的强项。到了第二天，彭莹玉就回到客栈，说已经买下了一幢大宅子，是南宋名将韩世忠晚年的住宅，足够他们这些人全部住下。
沈飞知道韩世忠晚年心灰意冷，辞官隐居杭州，经常带一名仆人骑马在西湖浏览，不谈兵事，连老部下都很难见他一面。不过受到的礼遇极高，赵构经常在皇宫里的宴请他，爵位也一升再升，从潭国公，到咸安郡王，去世时被追封通义郡王，宋孝宗时又被追封为蕲王。因此他的住宅被称为“韩蕲王府”，虽然已经是元末，能把这样的名人住宅拿下，也足见彭莹玉的能力了。