MySqlDataReader.Read() «Тайм-аут» при чтении из очень большой таблицы (более 100 миллионов записей)

Question

У меня есть большая таблица, содержащая около 100 миллионов записей в MySQL. . Я хочу, чтобы прочитать все записи из него, и обрабатывать их в моем C#/Net программы, поэтому я написал код так:

string sql = "SELECT * FROM the_table"; 
MySqlCommand cmd = new MySqlCommand(sql, conn); 
MySqlDataReader rdr = cmd.ExecuteReader(); 
while (rdr.Read()) 
{ 
//... 
} 

Но после запуска в течение 3 минут, проблема возникает тайм-аут.

Если изменить оператор SQL, чтобы использовать "предел":

string sql = "SELECT * FROM the_table limit 60000000" //60 million 

то он хорошо работает. (петля while (rdr.Read()) заняла около 3,8 минуты)

Был ли тайм-аут вызван тем, что стол был слишком большим?

Что здесь происходит и как исправить проблему?

Answer 1

ОК, я, наконец, локализовал проблему! Это потому, что я использовал ""ADO.NET Driver for MySQL (Connector/Net) который был разработан MySQL. И может быть некоторые ошибки. Тогда я меняю использовать dotConnect, проблема исчезла. Спасибо за всю помощь.

Answer 2

Я поставил команду тайм-аут на более высокий значение и исправили проблему.

MySqlCommand mySqlCommand = new MySqlCommand(sql_cmd); 
mySqlCommand.Connection = _connection; 
mySqlCommand.CommandTimeout = 3600; 

Надеется, что это помогает