Ага. Но по отношению к прошлому.
Он имел обыкновение...
Мы, бывало,...
Я раньше...
и т.п.
Но только если ты этого больше не делаешь!

Когда отрабатывают эту конструкцию, говорят в том числе и о детстве:
В детстве я любил слушать сказки на ночь.
Я мечтал стать космонавтом.

Брать used to можно, если ты больше не любишь слушать сказки на ночь и не мечтаешь стать космонавтом.))
Не о детстве:
I used to smoke. - Я раньше курил [уже бросил, не курю].