然而，这个凭借统治者权利发家的“百万家族”在往后的几十年里也随着清朝的衰败而逐渐落没。随着家族人口的增加，康家大肆挥霍老本，兴建住宅，而能入账的钱寥寥无几。一切都顺其自然的发生了，康家后代越来越不思进取，他们有的竟然成了无业游民，或者铤而走险成为了盗贼，结局难料。
虽然闻名几世的康家随着历史滚滚而去了。但康家的家国理念确实值得我们学习。康百万家族的第十五代传人康道平为了鼓励自己更为了鼓励后代保家卫国，设家族庙堂留余堂，至今仍闻名于世。清末民初，内忧外患，康家第十七代孙一生致力于行医救人，接济穷人，被传为了佳话。四百余年的时间里，康家见证了历史的兴衰，历史也见证了康家的兴衰。