Python pandas read_sql 的编码问题
Python encoding issue with pandas read_sql
所以我正在尝试将两个字符串编码为 utf-8，以便我可以将它们与 pandas.read_sql 一起使用：
selectedTable = "ACC__AccountCodes"
baseSql = "SELECT * FROM FileMaker_Fields WHERE TableName="
现在当我对这两件事进行编码时：
baseSql.encode('utf-8')
selectedTable.encode('utf-8')
sqlString = "{}{}".format(baseSql, selectedTable)
我的输出如下所示：
b'SELECT * FROM FileMaker_Fields WHERE TableName='b'A\x00C\x00C\x00_\x00_\x00A\x00c\x00c\x00o\x00u\x00n\x00t\x00C\x00o\x00d\x00e\x00s\x00''
所以当我 运行 它的编码设置为 'latin1' 时，我得到错误：
pandas.io.sql.DatabaseError: Execution failed on sql 'SELECT * FROM FileMaker_Fields WHERE TableName=ACC__AccountCodes': ('HY000', '[HY000] [\x00F\x00i\x00l\x00e\x00M\x00a\x00k\x00e\x00r\x00]\x00[\x00F\x00i\x00l\x00e\x00M\x00a\x00k\x00e\x00r\x00]\x00 \x00F\x00Q\x00L\x000\x000\x000\x007\x00/\x00(\x001\x00:\x004\x007\x00)\x00:\x00 \x00T\x00h\x00e\x00 \x00c\x00o\x00l\x00u\x00m\x00n\x00 \x00n\x00a\x00m\x00e\x00d\x00 \x00"\x00A\x00"\x00 \x00d\x00o\x00e\x00s\x00 \x00n\x00o\x00t\x00 \x00e\x00x\x00i\x00s\x00t\x00.....
我似乎找不到任何解决这个问题的方法。我尝试过的一切都会让我回到这个问题，这会导致语法无效的 sql 错误。我正在使用 pyodbc，它期望 utf-8 编码作为输入。想法？
您不必将它们编码为 utf-8；尝试将它们作为普通字符串传递给 pandas read_sql 函数，它应该可以正常工作，如果没有，那么你在其他地方有问题......但是这里的编码不是你想要的。
Pyodbc 在查询中正常接受 unicode 字符串，所以这根本不是你的问题。
我还建议阅读 Unicode section on pyodbc documentation，其中包含某些数据库的特定 unicode 配置，尽管在您的情况下我认为这根本不是问题，因为它与数据库驱动程序编码有关，并且不是你的 sql 查询，每次都应该是一个普通的 unicode 字符串。
所以我正在尝试将两个字符串编码为 utf-8，以便我可以将它们与 pandas.read_sql 一起使用：
selectedTable = "ACC__AccountCodes"
baseSql = "SELECT * FROM FileMaker_Fields WHERE TableName="
现在当我对这两件事进行编码时：
baseSql.encode('utf-8')
selectedTable.encode('utf-8')
sqlString = "{}{}".format(baseSql, selectedTable)
我的输出如下所示：
b'SELECT * FROM FileMaker_Fields WHERE TableName='b'A\x00C\x00C\x00_\x00_\x00A\x00c\x00c\x00o\x00u\x00n\x00t\x00C\x00o\x00d\x00e\x00s\x00''
所以当我 运行 它的编码设置为 'latin1' 时，我得到错误：
pandas.io.sql.DatabaseError: Execution failed on sql 'SELECT * FROM FileMaker_Fields WHERE TableName=ACC__AccountCodes': ('HY000', '[HY000] [\x00F\x00i\x00l\x00e\x00M\x00a\x00k\x00e\x00r\x00]\x00[\x00F\x00i\x00l\x00e\x00M\x00a\x00k\x00e\x00r\x00]\x00 \x00F\x00Q\x00L\x000\x000\x000\x007\x00/\x00(\x001\x00:\x004\x007\x00)\x00:\x00 \x00T\x00h\x00e\x00 \x00c\x00o\x00l\x00u\x00m\x00n\x00 \x00n\x00a\x00m\x00e\x00d\x00 \x00"\x00A\x00"\x00 \x00d\x00o\x00e\x00s\x00 \x00n\x00o\x00t\x00 \x00e\x00x\x00i\x00s\x00t\x00.....
我似乎找不到任何解决这个问题的方法。我尝试过的一切都会让我回到这个问题，这会导致语法无效的 sql 错误。我正在使用 pyodbc，它期望 utf-8 编码作为输入。想法？
您不必将它们编码为 utf-8；尝试将它们作为普通字符串传递给 pandas read_sql 函数，它应该可以正常工作，如果没有，那么你在其他地方有问题......但是这里的编码不是你想要的。
Pyodbc 在查询中正常接受 unicode 字符串，所以这根本不是你的问题。
我还建议阅读 Unicode section on pyodbc documentation，其中包含某些数据库的特定 unicode 配置，尽管在您的情况下我认为这根本不是问题，因为它与数据库驱动程序编码有关，并且不是你的 sql 查询，每次都应该是一个普通的 unicode 字符串。