Во дворцах их использовали в качестве посыльных, стражников у дверей, слуг на банкетах. При дворе рабы обслуживали водяные часы и отбивали время ударами в барабан, присматривали в императорских поместьях за собаками или лошадьми, ухаживали за дикими зверями в зверинцах.
Основную часть населения Китая составляли крестьяне, иногда их делили на восемь низших рангов. Занятие определенного положения в обществе вовсе не означало освобождения от выполнения государственных обязанностей, и, прежде всего, отбытия определенного срока на государственных работах. Время от времени крестьян могли призвать в качестве перевозчиков на реках или каналах, работников на государственных железных и соляных копях, строителей мостов, крепостей или дорог для проезда императора. 

Иногда объявлялась особая мобилизация для выполнения какого-либо крупного проекта, который контролировало правительство, например строительство дамбы или Великой Китайской стены. От каждого уезда ежегодно направлялось определенное количество трудоспособных мужчин. Никакого жалованья за государственные работы не выплачивалось, работники обеспечивались только минимальным питанием и кровом.
По положению крестьянин считался свободным, но далеко не всегда мог распоряжаться результатами своего труда. В ханьский период положение крестьянина не было стабильным, он часто оказывался в затруднительном положении или бедствовал – ведь крестьянин зависел от «милостей» природы: часто становился жертвой наводнений или засухи. И тогда, чтобы пережить трудную зиму или вспышку чумы, ему приходилось продавать свои жалкие орудия труда или тяглового быка, ради получения небольшой суммы денег и покупки семян для будущего посева.
Возможно, крестьянин также брал взаймы деньги у соседа – богатого владельца земли. Когда приходило время платежей и у него не оказывалось ничего, кроме имущества и животных, крестьянину приходилось продавать своих детей в рабство, а земли уступать кредитору. 

После этого не оставалось ничего иного, как работать на чужой земле за небольшое вознаграждение, причем условия оплаты он оспорить не мог.
Неудивительно, что, подвергшиеся экономическому давлению, многие крестьяне уходили с насиженных мест и становились бродягами, нищими или разбойниками. Нередко они объединялись в вооруженные банды, которые нападали на проезжавших по дорогам чиновников и купцов, а иногда терроризировали целые районы. Удачливые бандиты становились героями народных рассказов и литературных произведений (роман Ши Найаня «Речные заводи»).
Конечно, условия существования конкретных семей могли различаться в зависимости от места проживания, но в общем были почти одинаковыми по всему Китаю. Обычно семья селилась в одном глинобитном доме (фанзе) с соломенной крышей и земляным полом. Окна вместо стекол были затянуты бумагой, разрывавшейся при сильном порыве ветра. 

Дом состоял из кухни и одной-двух комнат, вдоль стен располагались глиняные ложа (кан). В углу кухни находилась небольшая печь с котлом для приготовления пищи. Чтобы обогреть комнату, дымоход соединялся с каном.