Eu encontrei a resposta que você tem que usar a mesma string de conexão que seria usada em um arquivo tnsnames.ora na string de conexão após o '@" assim
from sqlalchemy import create_engine
if __name__ == "__main__":
engine = create_engine("oracle+cx_oracle://<username>:<password>@(DESCRIPTION = (LOAD_BALANCE=on) (FAILOVER=ON) (ADDRESS = (PROTOCOL = TCP)(HOST = <host>)(PORT = 1521)) (CONNECT_DATA = (SERVER = DEDICATED) (SERVICE_NAME = devdb)))")
result = engine.execute("create table test_table (id NUMBER(6), name VARCHAR2(15) not NULL)")
result = engine.execute("drop table test_table")
Este exemplo funciona bem e você pode comentar a instrução drop e verificar o banco de dados para ver se a tabela foi criada.
