该书首先论述了人的才能的实质，提出从神、精、筋、骨、气、色、仪、容、言等九个方面的外在表现，并由外及内，再由内到外，来察知一个人内在的性格特征。该书认为人的素质以“中和”为最可贵，主张神必须平淡、精必须坚刚、筋必须劲精、骨必须植固、气必须清和、色必须愉悦、仪必须肃正、容必须端直、言必须缓和才是真正意义上有才能的人。并且，《人物志》从人的体貌、禀赋、道德、职业等方面将人才分为兼德、兼才、偏才三类，并详细分析了各类人才的特点和在不同情况下的具体表现；又从观察选拔人才的角度出发，考察了选拔人才的过程中出现的困难和各种方法的得失，主张用人者不能要求手下的人各个多才多艺,而要注重挖掘其特长，用其所长，避其所短，量才而用，量能授官。