dê um apelido
SELECT DATE(`record_date`) as record_d FROM Users
então use isso
session.query(Users.record_d).all()
Se quiser fazê-lo diretamente, tente isso
your_dates = session.query(cast(Users.record_date, DATE)).all()
EDITAR:
your_dates = session.query(func.DATE(Users.record_date)).all()