O templo da aldeia é a construção mais alta. Ali se realizavam as reuniões da aldeia para resolver litígios, castigar os criminosos e até organizar atividades educacionais, sendo por isso um centro de poder da aldeia.
Hu Guansan, personalidade importante da família da linhagem Hu, era o 6º homem mais rico do sul da China. Ele construiu vários templos e residências na aldeia. Seu filho se casou com a filha de um primeiro-ministro daquele período. Para homenagear o primeiro-ministro na aldeia Xidi, ele contratou carpinteiros e construiu pavilhões na aldeia. Todas as construções mostram a riqueza e a sua posição na região.
Hu Guansan é apenas uma personalidade representativa entre comerciantes de Huizhou. Durante mais de 200 anos, entre os séculos 17 e 19, a aldeia tinha mais de 600 residências, 34 templos, 99 ruas, com uma população de mais de 10 mil. Mas, agora a aldeia é habitada apenas por mais de mil pessoas, com 124 residências antigas bem preservadas.
As residências antigas de Huizhou mostram a riqueza e a fama dos comerciantes de Huizhou, por terem uma boa educação desde crianças. O ditado entre eles é "Os estudiosos são superiores a todos os outros", isto quer dizer, se querem conquistar, têm de estudar. Mesmo sem nada conquistar, no entanto, tinham que ter comportamentos exemplares na sociedade. Com tais mandamentos, 115 personalidades de Huizhou foram escolhidos para ocuparem cargos públicos nas Dinastias Ming e Qing.
A Residência Lufutang pertence à uma família de intelectuais. O dono não queria cargo, nem riquezas. Vivia na aldeia, fazendo poemas, pintando e colecionando objetos antigos. O estilo de sua residência é simples e humilde. Os versos pintados em pilares dizem: "Benevolência é a procura da família por centenas de anos, o estudo é a primeira coisa ideal".
Cerca de 10 quilômetros de Xidi, encontra-se a antiga aldeia Hongcun chamado por visitantes como aldeia na Pintura Tradicional Chinesa.
Na aldeia Hongcun concentram-se familiares da linhagem do sobrenome Wang, uma das grandes famílias de Huizhou.
A aldeia possui cerca de 800 anos. Vendo de cima para baixo, ou a partir do ponto de vista de um pássaro, a aldeia se parece com um búfalo debruçado. A montanha é considerada como cabeça do búfalo, as árvores como os chifres, as residências como o corpo e as pontes como os pés. As águas que correm e passam por Hongcun são atraentes como se fossem intestinos do búfalo e formam um grande tanque de forma de lua meia no centro da aldeia e daí correm para o lago ao sul da aldeia, conhecido como barriga do búfalo.
A aldeia de Hongcun conta agora com mais de 100 antigas residências, templos e pavilhões, das quais, a maioria foi construída entre séculos 14 e 19. A mansão Chengzhi, construída em 1855, é a maior entre todas as residências, propriedade de um empresário ligado ao ramo do sal. A mansão é dividida por 9 pátios, sustentada por 136 pilares, ligadas por mais de 60 portas ou entradas e mais de 60 janelas, além de um local para pesca. Esculturas de madeiras são mais preciosas feitas por mais de 20 carpinteiros durante 4 anos investindo mais de 3 mil gramas de ouro.
As antigas aldeias de Xidi e Hongcun foram inscritas na lista dos Patrimônios Culturais Mundiais da UNESCO em 2000.