自治州确实分为县、自治县、市。根据《中华人民共和国宪法》第30条的规定，中华人民共和国的行政区域划分如下：

1. 全国分为省、自治区、直辖市；

2. 省、自治区分为自治州、县、自治县、市；

3. 县、自治县分为乡、民族乡、镇；

4. 直辖市和较大的市分为区、县。

因此，自治州作为省、自治区的下一级行政区域，其下确实包括县、自治县、市。