解决mysql的配置ONLY_FULL_GROUP_BY引起的错误

Python publisher01 20℃

解决mysql的配置ONLY_FULL_GROUP_BY引起的错误

感谢mysql大师波多老师、GV大师伟嘉在这个问题上对我的帮助和启发,感谢!

以下是本人在使用python-sqlalchemy时遇到的问题,如果使用原生mysql语句同样需注意这个问题。

OperationalError: (_mysql_exceptions.OperationalError) (1055,”Expression #1 of

SELECT list is not in GROUP BY clause and contains nonaggregated column

‘db.table.create_time’ which is not functionally dependent on columns in

GROUP BY clause; this is incompatible with sql_mode=only_full_group_by”) [SQL:u’SELECT table.create_time AS table_create_time, table.count AS

table_count \nFROM table \nWHERE table.cluster_id = %s AND

table.create_time > %s GROUP BY table.count’] [parameters: (1, datetime.datetime(2000,1,1,0,0))]

1

2

3

4

5

6

7

8

原因:

mysql5.7.5版本开始,sql_mode使用的是默认值( 如上),而之前使用的mysql配置文件中sql_mode=”“,由于这个特性使在使用group_by时出现报错,以下是新版的默认值:

默认的sql-mode里的ONLY_FULL_GROUP_BY字段导致不能直接查询group_by包裹的之外的字段,如下使用,只查询group_by的字段可以正常使用,但是同时查询create_time和count字段会出现错误:

# 正确session.query(Table.count).group_by(Table.count).all()

1

2

# 报错session.query(Table.create_time,Table.count).group_by(Table.count).all()

1

2

解决办法:

修改sql_mode 

如设置:sql_mode=”“ 

问题解决,但是由于sql_mode=”“会带来可以预估的错误,如数据被截断等,所以这种方法有数据丢失的风险。

程序中改变查询语句的写法,group_by之外的字段使用func函数包围 

为了符合ONLY_FULL_GROUP_BY=True的要求,如下: 

那么使用方法2,程序中正确的写法示例如下:

fromsqlalchemyimportfunc# 1. 注意:这样生成的数据结果为[(),()],列表中的结果是元组,而不是生成器,# 如果要对结果进行解析,解析方式也跟原来的方式不一样objs= session.query(func.any_value(Table.create_time,Table.count).                    group_by(Table.count).all()# 2. 但是如果在这样的写法中只需要使用count字段,写成obj.count是可以的obj= session.query(func.any_value(Table.create_time,Table.count).                  group_by(Table.count).first()

以下为sql_mode常用值的含义,参考自这里

ONLY_FULL_GROUP_BY:对于GROUP BY聚合操作,如果在SELECT中的列,没有在GROUP BY中出现,那么这个SQL是不合法的,因为列不在GROUP BY从句中

NO_AUTO_VALUE_ON_ZERO:该值影响自增长列的插入。默认设置下,插入0或NULL代表生成下一个自增长值。如果用户希望插入的值为0,而该列又是自增长的,那么这个选项就有用了。

STRICT_TRANS_TABLES:在该模式下,如果一个值不能插入到一个事务表中,则中断当前的操作,对非事务表不做限制

NO_ZERO_IN_DATE:在严格模式下,不允许日期和月份为零

NO_ZERO_DATE:设置该值,mysql数据库不允许插入零日期,插入零日期会抛出错误而不是警告。

ERROR_FOR_DIVISION_BY_ZERO:在INSERT或UPDATE过程中,如果数据被零除,则产生错误而非警告。如果未给出该模式,那么数据被零除时MySQL返回NULL

NO_AUTO_CREATE_USER:禁止GRANT创建密码为空的用户

NO_ENGINE_SUBSTITUTION:如果需要的存储引擎被禁用或未编译,那么抛出错误。不设置此值时,用默认的存储引擎替代,并抛出一个异常

PIPES_AS_CONCAT:将”||”视为字符串的连接操作符而非或运算符,这和Oracle数据库是一样的,也和字符串的拼接函数Concat相类似

ANSI_QUOTES:启用ANSI_QUOTES后,不能用双引号来引用字符串,因为它被解释为识别符

转载请注明:Python量化投资 » 解决mysql的配置ONLY_FULL_GROUP_BY引起的错误

喜欢 (0)or分享 (0)