python爬取豆瓣Top250电影导入csv和MySQL中

1. 准备工作

  最近在写毕业课设，需要一些电影的信息，所以网上找了一些代码自己做了修改。在爬取之前先在你的数据库建立movie表，以下是我自己建的表，你可以根据自己需求设计字段。

细心的网友会发现字段paihang为啥不用rank显得高大尚一点，我也想用，但是在插入数据的时候会插入不成功，然后把字段改成paihang就竟然插入成功了。这个奇葩的错误我刚开始以为表的字段太多了，发现只要改名就行了。如果有知道原因的网友，希望可以在我的评论区留言。

2. 测试数据库是否能插入数据

有了数据库表格后，你需要测试一下你的表是否能插入数据。

def test_SQinsert():
	db = pymysql.connect(host='127.0.0.1', port=3306, user='root', passwd='root', db='paper', charset='utf8')
    # 创建数据库游标
    cursor = db.cursor()
    sql = "INSERT INTO movie(name,id,actor,gener,country,release_data,rate,paihang,comment) \
           VALUES ('%s','%s','%s','%s','%s','%s','%f','%d','%d')" % \
           ('Mac', 'Mo22222', 'Mohan', 'Mohan', 'Mohan', 'dd',  1.2, 99,88)
    try:
       # 执行sql语句
       cursor.execute(sql)
       db.commit()
       print("insert ok")
    except pymysql.Error as e:
       # 发生错误时回滚
       db.rollback()
       print('no OK')
       # 打印错误
       print