Можно ли назвать глагол трудиться только возвратным

Да, конечно, глагол "трудиться" можно назвать только возвратным. Это означает, что он используется только в возвратной форме, когда действие направлено на самого субъекта – человека, выполняющего это действие. Глагол "трудиться" обозначает деятельность, связанную с трудом и усилиями, которые прилагает сам субъект. В русском языке такие глаголы называются возвратными и используются с возвратным местоимением (себя, себе).