吴损在御史台的职务并不算最高，御史台除了御使大夫一人作为主官之外，还有两个副官，就是御史中丞，吴损就是其中之一，但是玄宗以来，御使大夫并不在御史台常设，常常授予边镇或地方节度使兼任，御史台一般都是由两个御史中丞主事。

御史大夫、中丞以下有三个下属机构：一为台院，管辖侍御史；二为殿院，管辖殿中侍御史；三为察院，管辖监察御史。承办与朝廷官员的有关案件一般都由侍御史所在的台院负责，殿中