Ми родился в семье, занимавшей высокие посты в первые годы правления династии Сун (960-1279 гг.). Поскольку его мать была кормилицей императора Инцзуна (1063/64-67/68 гг.), он воспитывался в пределах императорских округов, свободно смешиваясь с императорской семьёй. В детстве Ми проявил неосознанный талант, особенно в каллиграфии. Несмотря на то, что он испытывал отвращение к формальным урокам, предписанным будущему чиновнику, он проявил живой интерес к оригинальной поэзии и умению рисовать, а главное каллиграфически писать. В более сознательной жизни у Ми была активная официальная карьера, с частой сменой должностей. Он начал как редактор книг в Императорской библиотеке и впоследствии работал на трёх должностях в провинции Хэнань. В 1103 году он был назначен доктором философии и на короткое время был военным губернатором провинции Увай в провинции Аньхой. Вернувшись в столицу в 1104 году, он стал профессором живописи и каллиграфии, воспользовавшись случаем, чтобы подарить импер