函数计算 Python 连接 SQL Server 小结
python 連接數據庫通常要安裝第三方模塊,連接 MS SQL Server 需要安裝?pymssql?。由于 pymsql 依賴于?FreeTDS,對于先于 2.1.3 版本的 pymssql,需要先安裝 FreeTDS。由于早期版本的 pymssql 只提供了 windows 下的 wheel 打包,其他平臺(如 linux)需要從源碼包編譯安裝,那需要先安裝 freetds-dev 包,以提供必要的頭文件。
函數計算的 runtime 運行時的目錄是只讀的,所以對于需要使用 apt-get 和 pip 安裝依賴的場景,需要將依賴安裝在代碼目錄而不是系統目錄。具體安裝方法可以參考《函數計算安裝依賴庫方法小結》。而 pymssql 的老版本涉及到編譯安裝,比常見的二級制安裝到本地目錄略復雜一些。
函數計算依賴安裝需要有個模擬的 linux 環境,從前我們推薦使用 fcli shell 的 sbox ,啟動一個接近生產環境的 docker container 進行依賴安裝。因為有些依賴是平臺相關的,在 mac 系統安裝的動態鏈接庫無法在函數計算的 linux 環境下運行, pymssql 恰好屬于這種情況。本文我將使用?fc-docker進行安裝和本地測試。
下面的例子是基于函數計算 runtime python3.6 的,對于 python2.7 也進行了測試,同樣適用。
準備測試環境
首先使用 docker 在本機 Mac 電腦下運行一個 SQL Server 2017 服務,并初始化表結構,編輯一個 index.py 的測試文件,以驗證數據庫訪問是否成功。
$ docker pull mcr.microsoft.com/mssql/server:2017-latest$ docker run -e 'ACCEPT_EULA=Y' -e 'SA_PASSWORD=Codelife.me' \-p 1433:1433 --name sql1 \-d mcr.microsoft.com/mssql/server:2017-latest將 SQL Server 啟動于 1433 端口,并設定 SA 賬戶密碼為?Codelife.me
$ brew tap microsoft/mssql-release https://github.com/Microsoft/homebrew-mssql-release $ brew update $ ACCEPT_EULA=y brew install --no-sandbox msodbcsql mssql-tools使用 homebrew 安裝 mssql 客戶端 sqlcmd。
$ sqlcmd -S localhost -U SA -P 'Codelife.me' 1>CREATE DATABASE TestDB 2>SELECT Name from sys.Databases 3>GO Name ----------------------------------------------- master tempdb model msdb TestDB (5 rows affected)創建測試數據庫 TestDB。
1> USE TestDB 2> CREATE TABLE Inventory (id INT, name NVARCHAR(50), quantity INT) 3> INSERT INTO Inventory VALUES (1, 'banana', 150); INSERT INTO Inventory VALUES (2, 'orange', 154); 4> GO Changed database context to 'TestDB'. (1 rows affected) (1 rows affected)創建一張 Inventory 表,并參入一行測試數據。
1> SELECT * FROM Inventory WHERE quantity > 152; 2> GO id name quantity ----------- -------------------------------------------------- ----------- 2 orange 154 (1 rows affected) 1> QUIT驗證一下插入結果并退出。
準備一個測試函數
import pymssqldef handler(event, context): conn = pymssql.connect( host=r'docker.for.mac.host.internal', user=r'SA', password=r'Codelife.me', database='TestDB' ) cursor = conn.cursor() cursor.execute('SELECT * FROM inventory WHERE quantity > 152') result = '' for row in cursor: result += 'row = %r\n' % (row,) conn.close() return result編寫一個測試函數 index.py。該函數連接 mac 宿主機docker.for.mac.host.internal?(這里不能是 localhost,因為 fc-docker 會將函數運行在 container 內部)的 SQL Server 服務。執行一個查詢,并把結果返回出來。
最新版的 pymssql
創建一個空目錄,存放上 index.py 文件。將命令會話的當前路徑切換到 index.py 所在的目錄,然后執行
$ docker run --rm --name mssql-builder -t -d -v $(pwd):/code --entrypoint /bin/sh aliyunfc/runtime-python3.6 $ docker exec -t mssql-builder pip install -t /code pymssql $ docker stop mssql-builder執行上面命令可以順利返回結果。對于不需要使用老本 pymssql 的用戶看到這里就可以結束了。
早期版本的 pymssql
對于早于 2.1.3 版本的 pymssql, pip install 會觸發源碼編譯安裝,對于這種情況,需要安裝編譯時依賴的 freetds-dev,以及運行時依賴的 libsybdb5。編譯時依賴可以直接安裝在系統目錄里,運行時依賴必須安裝在本地目錄下。
docker run --rm --name mssql-builder -t -d -v $(pwd):/code --entrypoint /bin/sh aliyunfc/runtime-python3.6docker exec -t mssql-builder apt-get install -y -d -o=dir::cache=/code libsybdb5 docker exec -t mssql-builder bash -c 'for f in $(ls /code/archives/*.deb); do dpkg -x $f $(pwd) ; done;' docker exec -t mssql-builder bash -c "rm -rf /code/archives/; mkdir /code/lib;cd /code/lib; ln -sf ../usr/lib/x86_64-linux-gnu/libsybdb.so.5 ." docker exec -t mssql-builder apt-get install -y freetds-dev docker exec -t mssql-builder pip install cython docker exec -t mssql-builder pip install -t /code pymssql==2.1.3 docker stop mssql-builder測試通過。
小結
這是一份來遲的函數計算使用 sql server 數據庫的配置文檔。當前版本的 pymssql 已經不再需要源碼安裝了。但是 pip 源碼包安裝的方法,對于其他類似的場景也是適用的。
本文也提供了一種基于 fc-docker 的配置和調試方法,不同 fcli 的 sbox,fc-docker 可以寫成腳本反復執行,并且也可以用于本地模擬執行,對于 CI 場景非常有幫助。
?
原文鏈接
本文為云棲社區原創內容,未經允許不得轉載。
轉載于:https://www.cnblogs.com/yunqishequ/p/9999615.html
總結
以上是生活随笔為你收集整理的函数计算 Python 连接 SQL Server 小结的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 三、单一职责原则、开放-封闭原则、依赖倒
- 下一篇: Kali学习笔记31:目录遍历漏洞、文件