PythonでAWS LambdaでMySQLを使用する際の問題

Question

AWS Lambda Python（初心者はPython btw）で起動していますが、MySQLの依存関係を含むいくつかの問題があります。私は私のMacの指示hereに従おうとしています。ステップ数3の場合

、私は私のプロジェクトのルートでコマンドを実行するといくつかの問題を取得しています

sudo pip install MySQL-python -t/

エラー：私は、次のラムダ関数（作品を書き終わる

Exception: Traceback (most recent call last): File "/Library/Python/2.7/site-packages/pip-1.5.6-py2.7.egg/pip/basecommand.py", line 122, in main status = self.run(options, args) File "/Library/Python/2.7/site-packages/pip-1.5.6-py2.7.egg/pip/commands/install.py", line 311, in run os.path.join(options.target_dir, item) File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/shutil.py", line 292, in move raise Error, "Destination path '%s' already exists" % real_dst Error: Destination path '/MySQL_python-1.2.5-py2.7.egg-info/MySQL_python-1.2.5-py2.7.egg-info' already exists

私のMacでうまくいく）：

import MySQLdb 

def lambda_handler(event, context): 
    # Open database connection 
    db = MySQLdb.connect(...) 

    # prepare a cursor object using cursor() method 
    cursor = db.cursor() 

    sql = "SELECT * FROM Users" 

    try: 
     # Execute the SQL command 
     cursor.execute(sql) 
     # Fetch all the rows in a list of lists. 
     results = cursor.fetchall() 
     for row in results: 
     fname = row[0] 
     lname = row[1] 
     age = row[2] 
     sex = row[3] 
     income = row[4] 
     # Now print fetched result 
     print ("lname=%s" %(lname)) 
    except: 
     print "Error: unable to fecth data" 

    # disconnect from server 
    db.close() 

私が行ったことは/Library/Python/2.7/site-pに行くことですsudo pipを使ってMySQL-pythonをインストールしたときにダウンロードされたMySQLdbフォルダ/ファイル（私はここで何か間違っていると確信しています）、そして私のラムダプロジェクトにコピーして圧縮しますコンテンツをlambda_function.pyとともにAWS Lambdaにアップロードします。

それから私は得る：任意のヘルプや提案のための

Unable to import module 'lambda_function': No module named MySQLdb

グレイト！

EDIT

はsudoのピップは、MySQL-pythonの-t/pathToProject仕事をインストールします（コメントで助けに感謝）を行うことができましたが、ラムダ関数をruningてたときに、今、私はこれを取得：

Unable to import module 'lambda_function': /var/task/_mysql.so: invalid ELF header

私はLinuxのボックスで作業するなら、それはうまくいくはずです（人によって示唆されるように）が、OS Xのボックスから動作させることができるかどうかは疑問です。

Answer 1

あなたの問題は主に開発パッケージが不足していると考えられます。私は、あなたが以下のものが必要になると思う：

にsudoのyum -y問題は私のUbuntuのインストーラにも同様に起こるのmysql-develのに

Answer 2

をインストールすることは、MySQLクライアントコネクタドライバ上で保留されているので、本当の問題です。だから、解決策はMySQL-pythonを幸せにする（クライアントライブラリを利用するために）MySQL-client-devパッケージをインストールすることです。 MAC

# try this first 
fink install mysql-unified-dev 

# or this if above fail. 
brew install mysql 
# you must add this to your user profile startup if you use brew 
export PATH=$PATH:/usr/local/mysql/bin 

については

# Ubuntu only(or setup vm for ubuntu inside your mac) 
# Three dependencies for MySQL python recompilation 
sudo apt-get install python-dev libssl-dev 

#Now the mysql client-dev 
sudo apt-get install libmysqlclient-dev 

# If you like mariadb client 
sudo apt-get install libmariadbclient-dev 

あなたはここに同様の答えを得ることができます：PIPをインストールしようと次にMac OS X - EnvironmentError: mysql_config not found

を。

"sudo pip"を使用する人はお勧めできません。あなたは、あなたのpython開発のためにVirtualenvとvirtualwrapperをセットアップして、sudoなしでpipすることができます。また、新しい展開を分離してテストする方が簡単です。 （ただし、mysqlclient-devライブラリの問題は修正されていません）

Answer 3

Amazon Linuxインスタンスを使用してPythonパッケージをビルドし、それらをラムダ展開パッケージに含める必要があります。方法についてはthis excellent articleをご覧ください。この記事で言及されているパッケージは必要なパッケージとは異なりますが、同様に、私のlambdas用にpsycopg2とpymssqlを構築するのに役立ちました。

Answer 4

ラムダのようなユースケースでは、PyMySQLのような純粋なPythonの実装を使用すると、もっと幸せになるでしょう。

これは、Python Database API仕様に続くMySQLdbの代替品です。トリガされたラムダイベントのようなほとんどの場合、それはまさに速いでしょう。

私は多くのプロダクションでそれを使用しました。

Answer 5

lambda-dockerを使用すると、同様のLinux環境にアクセスすることなく、ラムダ機能をセットアップしてテストすることができます。

ラムダをセットアップするには、lambda-dockerビルドイメージを使用して分離ドッカーコンテナを実行し、コンテナにpip install <package>コマンドを実行します。その後、コンテナをエクスポートし、インストールされたパッケージをusr/libの下に置き、AWSラムダパッケージに配置します。

ラムダをラムダ - ドッカー画像で実行することで、互換性をテストすることができます。機能する場合は、自信を持ってAWS Lambdaにアップロードしてアップロードしてください。

docker run -d -v "$PWD":/var/task lambci/lambda:build-python2.7 tail -f /dev/null 

docker ps 

docker exec 0c55aae443e6 pip install pandas 

docker exec 0c55aae443e6 pip install sqlalchemy 

docker exec 0c55aae443e6 pip freeze 

docker exec 0c55aae443e6 python -c "import site; print(site.getsitepackages())" 

docker container export -o lambda_ready_container 0c55aae443e6