В русском языке существуют правила написания приставок и слов, которые могут быть написаны как слитно, так и раздельно в зависимости от контекста. В вашем случае слово «не возвращались» состоит из двух частей: частица «не» и глагол «возвращались».
Правило:
Слитное написание «не» с глаголами**: Обычное правило гласит, что если «не» с глаголом образует отрицание, то оно пишется раздельно. Например, «он не возвращался» – здесь «не» и «возвращался» пишутся раздельно.
Раздельное написание: Если слово с «не» используется в значении, где «не» логически подчеркивает отрицание, то также пишется раздельно.
Таким образом, в вашем примере правильное написание — «не возвращались».
Итак, правильный вариант — раздельное написание: не возвращались.