Python爬取數據存入MySQL的方法是什么

137次閱讀

共計 1388 個字符，預計需要花費 4 分鐘才能閱讀完成。

Python 爬取數據存入 MySQL 的方法有以下幾種：

使用 Python 的 MySQLdb 模塊：MySQLdb 是 Python 與 MySQL 數據庫交互的接口模塊，可以通過安裝 MySQLdb 模塊并導入使用，通過執行 SQL 語句將爬取到的數據插入 MySQL 數據庫中。

import MySQLdb

# 建立數據庫連接 
db = MySQLdb.connect(host="localhost", user="root", passwd="password", db="database")

# 創建游標對象 
cursor = db.cursor()

# 執行 SQL 語句 
sql = "INSERT INTO table (column1, column2) VALUES ('value1', 'value2')"
cursor.execute(sql)

# 提交數據庫事務 
db.commit()

# 關閉游標和數據庫連接 
cursor.close()
db.close()

使用 Python 的 pymysql 模塊：pymysql 是一個純 Python 編寫的 MySQL 數據庫驅動，可以通過安裝 pymysql 模塊并導入使用，通過執行 SQL 語句將爬取到的數據插入 MySQL 數據庫中。

import pymysql

# 建立數據庫連接 
db = pymysql.connect(host="localhost", user="root", passwd="password", db="database")

# 創建游標對象 
cursor = db.cursor()

# 執行 SQL 語句 
sql = "INSERT INTO table (column1, column2) VALUES ('value1', 'value2')"
cursor.execute(sql)

# 提交數據庫事務 
db.commit()

# 關閉游標和數據庫連接 
cursor.close()
db.close()

使用 Python 的 SQLAlchemy 模塊：SQLAlchemy 是 Python 中的一個數據庫工具包，可以通過安裝 SQLAlchemy 模塊并導入使用，通過建立數據庫連接、創建數據庫會話對象并插入數據來將爬取到的數據存入 MySQL 數據庫。

from sqlalchemy import create_engine
from sqlalchemy.orm import sessionmaker
from your_module import Base

# 建立數據庫連接 
engine = create_engine('mysql://user:password@localhost/database')
Base.metadata.bind = engine

# 創建數據庫會話對象 
DBSession = sessionmaker(bind=engine)
session = DBSession()

# 插入數據 
new_data = YourTable(column1='value1', column2='value2')
session.add(new_data)
session.commit()

# 關閉會話 
session.close()