De acordo com a documentação este é um exemplo de migração que transforma uma string em datetime. Não tenho certeza se funcionará, então você pode tentar testá-lo em um ambiente de desenvolvimento/estágio antes de ir para o ambiente de produção.
class ChangeColumnToUsers < ActiveRecord::Migration
def self.up
change_column :users, :created_at, :datetime
end
def self.down
change_column :users, :created_at, :string
end
end