Python查询oracle数据库速度慢

比眉伴天荒 2022-03-30 06:50 378阅读 0赞

conn = cx_Oracle.connect('username/password@ip:port/servername')
    cur = conn.cursor()
    cur.execute('SELECT * FROM "db"."table"')
    cur是一个迭代器,不要用fetchall一次性取完數據
    直接 for row in cur 即可取数据

`使用：sqlalchemy`

MySQL-Python
        mysql+mysqldb://<user>:<password>@<host>[:<port>]/<dbname>
    
    pymysql
        mysql+pymysql://<username>:<password>@<host>/<dbname>[?<options>]
    
    MySQL-Connector
        mysql+mysqlconnector://<user>:<password>@<host>[:<port>]/<dbname>
    
    cx_Oracle
        oracle+cx_oracle://user:pass@host:port/dbname[?key=value&key=value...]

create_engine('oracle+cx_oracle://{a}:{b}@{c}:{d}/?service_name={e}'.format(a,b,c,d,e))
    create_engine('mysql+pymysql://%(user)s:%(password)s@%(host)s/%(database)s?charset=utf8' % laoshifu_info)
    
    1. df = pd.read_sql_table(table_name="table_name", con=engine)  
    （the function to_sql is case-sensitive，Found the root cause from DBMS (mysql) autoconvert the table name to lowercase.）
    2. df = pd.read_sql_query(sql=sql,con=engine)  # 很慢
    
    3. 
    ordf = pd.read_sql("SELECT * FROM db.table ",engine,chunksize=50000)
    dflist = []
    for chunk in ordf:
        dflist.append(chunk)
    df = pd.concat(dflist)

发表评论取消回复

表情：

评论列表（有 0 条评论，378人围观）

还没有评论，来说两句吧...

相关阅读

相关 Oracle：查询优化失败，响应速度慢

在Oracle数据库中，如果出现查询优化失败、响应速度慢的问题，可能有以下几个原因： 1. 查询复杂度高：如果查询语句涉及多表连接、大量计算等复杂操作，优化难度会增加。 2

港控/mmm°/ 2025年03月13日 21:27/ 0 赞/ 57 阅读

相关数据库疑惑：为何MySQL查询速度慢

MySQL查询速度慢可能有以下几个原因： 1. **索引问题**： - 如果查询字段没有对应的索引，MySQL需要对整个表进行扫描，效率自然低。 - 索引数量过多

た入场券/ 2025年03月09日 11:42/ 0 赞/ 43 阅读

相关 Oracle数据库性能瓶颈：查询速度慢

Oracle数据库查询速度慢可能由以下几个方面引起： 1. **索引问题**：如果查询的列没有对应的主键或者唯一索引，那么系统必须扫描整个表，效率低。 2. **表结构设计

矫情吗；*/ 2025年02月21日 22:27/ 0 赞/ 83 阅读

相关 Oracle数据库性能瓶颈分析：响应时间过长，查询速度慢

在Oracle数据库中，如果出现响应时间过长、查询速度慢的问题，通常可以从以下几个方面进行分析： 1. **资源限制**：查看系统的CPU使用率、内存空间、磁盘I/O等是否达

秒速五厘米/ 2025年02月15日 04:39/ 0 赞/ 87 阅读

相关性能瓶颈：Oracle表查询速度慢

在Oracle数据库中，如果表的查询速度变慢，可能是以下几个方面导致的： 1. 数据量大：如果表的数据量非常大，每次执行全表扫描会消耗大量时间。 2. 索引缺失或效率低：如

朱雀/ 2025年02月04日 02:24/ 0 赞/ 98 阅读

相关数据库新手困惑：MySQL查询速度慢的原因？

MySQL查询速度慢可能由以下几个原因造成： 1. 数据库设计问题： - 结构松散，冗余数据多； - 索引缺失或者不恰当，导致全表扫描。 2. 查询语句效率低：

川长思鸟来/ 2025年01月23日 13:45/ 0 赞/ 94 阅读

相关 Oracle查询速度慢：原因与解决

Oracle查询速度慢可能由以下几个原因导致，相应的解决方案也附带： 1. **索引缺失或不恰当**： - 解决：根据查询条件创建或优化索引。例如，对于经常基于某个列进

悠悠/ 2025年01月20日 04:12/ 0 赞/ 126 阅读

相关 Oracle查询速度慢：诊断与优化

在Oracle数据库中，如果查询速度变慢，可以通过以下步骤进行诊断和优化： 1. **分析SQL**： - 使用EXPLAIN PLAN查看执行计划，了解是否全表扫描、

深藏阁楼爱情的钟/ 2025年01月14日 07:30/ 0 赞/ 107 阅读

相关 Oracle查询速度慢：诊断和优化策略

Oracle查询速度慢可能由多种因素导致，以下是一些常见的诊断和优化策略： 1. **检查表结构**： - 确保所有字段都被正确地索引，这可以显著提高查询效率。

你的名字/ 2024年12月22日 09:12/ 0 赞/ 120 阅读

相关 Python查询oracle数据库速度慢

conn = cx_Oracle.connect('username/password@ip:port/servername') cur = conn.curs

比眉伴天荒/ 2022年03月30日 06:50/ 0 赞/ 379 阅读