在考取了举人之后，也不得官府录用，于是只能闲在家中。
好在他在鲁山县也算是个小地主，家中好歹有些田产，闲来的时候便设馆教授一些学生读书，靠着授徒和自家的田产日子也算是过的小康，可是他却不小心得罪了算是亲戚的一个王姓的家伙，这厮在鲁山相当有势力，到县衙之中诬告他抗赋不交，还强占了十几个年轻女子，鲁山县官府的当官的收了这姓王的不少钱财，便将牛金星的罪名给坐实，先是要牛金星拿出五百两银子摆平此时，可是牛金星家中虽然不算穷，但是一下拿出五百两银子，也是不可能的事情，于是便被直接发配到了卢氏县充军。
牛金星也只能自认倒霉，天寒地冻的上路被一路上押送到了卢氏县，路上还吃了押送他的差役不少的苦头，到了卢氏县了吧，本来想花点钱，弄个稍微轻松的差事，谁知道那个姓王的居然要对他赶尽杀绝，提前便在卢氏县花钱买通了当官的，更加上因为刑天军攻打永宁县的事情，根本就没给他找门路的机会，便被投入到了大牢之中。
牛金星呆在大牢里面是哭天无泪，求告无门，天天在大牢里面只能喝口烂菜汤，一个小小的发霉的饼子，幸好他的儿子也跟着到了卢氏县，在大牢外使了些钱，每日多少送入到牢中一点吃的，维持了牛金