继续学习Python爬虫,今天是实战爬取51Job招聘信息。爬取的所有信息要入库,此案例使用SQLAlchemy框架+MySQL数据库实现,首先就是要创建数据库spiderdb,将数据库编码设为utf8。前两天学习ORM框架的时候,只练习了对已存在的数据库的操作练习,创建表,添加表数据等。今天要分享的就是如何用sqlalchemy创建数据库。
如何用Python+sqlalchemy创建数据库
亲测有效,代码如下:
#_*_coding:utf-8_*_
# 作者 :liuxiaowei
# 创建时间 :1/20/22 2:25 PM
# 文件 :创建数据库.py
# IDE :PyCharm
from sqlalchemy import create_engine
# 方法一, 利用sqlalchemy_utils库的create_databse模块
from sqlalchemy_utils import database_exists, create_database
engine = create_engine('mysql+pymysql://root:12345@localhost:3306/spiderdb')
if not database_exists(engine.url):
create_database(engine.url)
print(database_exists(engine.url))
# 方法二 单纯使用sqlalchemy
with create_engine('mysql+pymysql://root:12345@localhost:3306/',
isolation_level='AUTOCOMMIT').connect() as connection:
connection.execute('CREATE DATABASE my_database charset="utf8"')