有關(guān)python操作大表，慢的問題

skynet

import MySQLdb
conn=MySQLdb.connect()
cursor=conn.cursor()
cursor.execute("select * from tables")
因表有將近1KW條記錄，執(zhí)行好慢，而且數(shù)據(jù)緩沖都放在執(zhí)行機(jī)器上，請問有什么方法可以先取一部份出來。

chrisyan

那就看你SQL語句了，你這樣取當(dāng)然都出來了

800long

這關(guān)python什么事，你用其他語言試試，能快的告訴一下！

ziggler

把表里的數(shù)據(jù)全取出來？應(yīng)該用一些分區(qū)字段、索引字段在WHERE條件里面，會快的。

xiaoyu9805119

呵呵，這跟語言沒關(guān)系的，你如果把這些數(shù)據(jù)都select出來，就是正常這樣查詢也要很久，所以不管用什么讀取都很慢。
偶曾經(jīng)用py讀取400w的數(shù)據(jù)，消耗內(nèi)存3.7G。。。
還是看你需要干嘛了，只能優(yōu)化sql來處理，或者改變邏輯了。

可可熊

可以考慮換個數(shù)據(jù)庫，

kytexzy

這是個策略和算法的問題，與python無關(guān)！

skynet

多謝各位，問題搞定了，mysql有l(wèi)imit這個關(guān)鍵字。