В настоящее время я использую MySQL и Python для очистки данных из Интернета. В частности, я очищаю данные таблицы и вставляю их в свою базу данных. Мое текущее решение работает, но я считаю, что он крайне неэффективен и, скорее всего, заблокирует мою базу данных, если я не переписал код. Вот что я сейчас использую (частичный код):
itemBank = []
for row in rows:
itemBank.append((tempRow2,tempRow1,tempRow3,tempRow4)) #append data
#itemBank List of dictionaries representing data from each
row of the table. i.e.
('Item_Name':"Tomatoes",'Item_Price':"10",'Item_In_Stock':"10",'Item_Max':"30")
for item in itemBank:
tempDict1 = item[0]
tempDict2 = item[1]
tempDict3 = item[2]
tempDict4 = item[3]
q = """ INSERT IGNORE INTO
TABLE1
(
Item_Name,
Item_Price,
Item_In_Stock,
Item_Max,
Observation_Date
) VALUES (
"{0}",
"{1}",
"{2}",
"{3}",
"{4}"
)
""".format(tempDict1['Item_Name'],tempDict2['Item_Price'],tempDict3['Item_In_Stock'],
tempDict4['Item_Max'],getTimeExtra)
try:
x.execute(q)
conn.commit()
except:
conn.rollback()
Выполнение каждой строки таблицы является громоздким. Я пробовал использовать executemany
, но я не могу понять, как правильно обращаться к значениям словарей. Итак, как я могу использовать executemany
здесь для вставки в базу данных с учетом структуры моих данных?