python基于Pandas讀寫MySQL數(shù)據(jù)庫
要實現(xiàn) pandas 對 mysql 的讀寫需要三個庫
- pandas
- sqlalchemy
- pymysql
可能有的同學會問,單獨用 pymysql 或 sqlalchemy 來讀寫數(shù)據(jù)庫不香么,為什么要同時用三個庫?主要是使用場景不同,個人覺得就大數(shù)據(jù)處理而言,用 pandas 讀寫數(shù)據(jù)庫更加便捷。
1、read_sql_query 讀取 mysql
read_sql_query 或 read_sql 方法傳入?yún)?shù)均為 sql 語句,讀取數(shù)據(jù)庫后,返回內(nèi)容是 dateframe 對象。普及一下:dateframe 其實也是一種數(shù)據(jù)結(jié)構(gòu),類似 excel 表格一樣。
import pandas from sqlalchemy import create_engine class mysqlconn: def __init__(self): mysql_username = 'root' mysql_password = '123456' # 填寫真實數(shù)庫ip mysql_ip = 'x.x.x.x' port = 3306 db = 'work' # 初始化數(shù)據(jù)庫連接,使用pymysql庫 self.engine = create_engine('mysql+pymysql://{}:{}@{}:{}/{}'.format(mysql_username, mysql_password, mysql_ip, port,db)) # 查詢mysql數(shù)據(jù)庫 def query(self,sql): df = pandas.read_sql_query(sql,self.engine) # df = pandas.read_sql(sql,self.engine) 這種讀取方式也可以 # 返回dateframe格式 return df if __name__ =='__main__': # 查詢的 sql 語句 SQL = '''select * from working_time order by id desc ''' # 調(diào)用 mysqlconn 類的 query() 方法 df_data = mysqlconn().query(sql=SQL)
2、to_sql 寫入數(shù)據(jù)庫
使用 to_sql 方法寫入數(shù)據(jù)庫之前,先把數(shù)據(jù)轉(zhuǎn)化成 dateframe 。
import pandas from sqlalchemy import create_engine class mysqlconn: def __init__(self): mysql_username = 'root' mysql_password = '123456' # 填寫真實數(shù)庫ip mysql_ip = 'mysql.mall.svc.test.local' port = 3306 db = 'work' # 初始化數(shù)據(jù)庫連接,使用pymysql庫 self.engine = create_engine('mysql+pymysql://{}:{}@{}:{}/{}'.format(mysql_username, mysql_password, mysql_ip, port,db)) # 查詢mysql數(shù)據(jù)庫 def query(self,sql): df = pandas.read_sql_query(sql,self.engine) # df = pandas.read_sql(sql,self.engine) # 返回dateframe格式 return df # 寫入mysql數(shù)據(jù)庫 def to_sql(self,table,df): # 第一個參數(shù)是表名 # if_exists:有三個值 fail、replace、append # 1.fail:如果表存在,啥也不做 # 2.replace:如果表存在,刪了表,再建立一個新表,把數(shù)據(jù)插入 # 3.append:如果表存在,把數(shù)據(jù)插入,如果表不存在創(chuàng)建一個表!! # index 是否儲存index列 df.to_sql(table, con=self.engine, if_exists='append', index=False) if __name__ =='__main__': # 創(chuàng)建 dateframe 對象 df = pandas.DataFrame([{'name':'小米','price':'3999','colour':'白色'},{'name':'華為','price':'4999','colour':'黑色'}]) # 調(diào)用 mysqlconn 類的 to_sql() 方法 mysqlconn().to_sql('phonetest',df)
插入數(shù)據(jù)庫的數(shù)據(jù):
以上就是python基于Pandas讀寫MySQL數(shù)據(jù)庫的詳細內(nèi)容,更多關(guān)于Python讀寫MySQL數(shù)據(jù)庫的資料請關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
Python函數(shù)式編程藝術(shù)之修飾器運用場景探索
本文將詳細介紹Python修飾器的概念,提供詳細的示例,并介紹如何使用它們來優(yōu)化和擴展代碼,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-11-11win7下 python3.6 安裝opencv 和 opencv-contrib-python解決 cv2.xfeat
這篇文章主要介紹了win7下 python3.6 安裝opencv 和 opencv-contrib-python解決 cv2.xfeatures2d.SIFT_create() 的問題,需要的朋友可以參考下2019-10-10Python腳本實現(xiàn)Zabbix多行日志監(jiān)控過程解析
這篇文章主要介紹了Python腳本實現(xiàn)Zabbix多行日志監(jiān)控過程解析,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-08-08