环境说明 mysql版本:5.7 端口:3306 数据库:test 表名:users 表结构如下: CREATE TABLE `users` ( `id` bigint(20) NOT NULL AUTO_INCREMENT...= cur.fetchall() # 获取执行的返回结果 # print(result) cur.close() conn.close() # 关闭mysql...result = self.get_query_results() # print(result) if not result: print("查询结果为空...__': MysqlToExcel().generate_table() 执行输出: 生成excel成功 查看excel表 ?...另外,我还得将查询结构中非string的转换为string类型。 test_excel.py #!
方式一 在mysql命令行环境下执行: sql语句+INTO OUTFILE +文件路径/文件名 +编码方式(可选) 例如: select * from user INTO OUTFILE '/var.../lib/mysql/msg_data.xls ' ; 注意事项: 0)可能会报没有 select command denied(没有查询权限) 或者 Access denied for user(没有...生成的文件中可能会有中文乱码问题,可以在语句后面+CHARACTER SET gbk (utf8等) 例如: select * from user INTO OUTFILE '/var/lib/mysql.../msg_data.csv ' CHARACTER SET gbk; 4)如果sql查询出来的数据包含有很大的数值型数据,则在excel中这些数值数据可能会出问题,因此,可以先导出为.txt/.csv...文件格式,再复制黏贴到excel文件中(首先设置单元格格式为文本) 方式二 在登录某服务器后,采用 mysql 命令执行 ,不需要登录进mysql命令行环境下。
Python系列之MySQL查询数据导出Excel 最近接到需求,需要通过一条SQL查询出来的id,去过滤另外一条SQL的数据,听起来并不难,但是因为业务原因需要查询很多个环境,而且需要经常查询,所以想到通过...python程序来实现,先查出一个SQL数据,然后通过id拼装in查询出数据。...] cursor.close() return df_mysql 先查询出ids def readPlatformDept(): sql_script = ''' SELECT...item_data.to_excel('item_query_excel.xlsx') import pandas as pd import warnings import pymysql...,还是可以写出来,对比一下java,觉得python语法有时候确实比较简便,比如要导出Excel,一行代码就可以,然后到linux上部署也比较容易,所以觉得后端程序员掌握一门脚本语言还是有需要的
MySQL 是一种流行的关系型数据库管理系统,支持导入各种类型的数据文件。然而,在导入文件时,可能会遇到文件大小的限制问题。 默认情况下,MySQL 的导入文件大小限制为 1GB。...这个参数定义了 MySQL 服务器和客户端之间传输数据的最大大小。如果超过了这个大小,MySQL 将会发送一个错误消息并停止导入。...你可以通过在 MySQL 配置文件中添加以下行来设置该参数: [mysqld] max_allowed_packet = 2G 这将把 max_allowed_packet 参数的值设置为 2GB。...请注意,这个设置只是全局的,它将影响 MySQL 服务器的所有客户端。 最后,如果你仍然无法导入一个大于 max_allowed_packet 大小的文件,你可以尝试分割文件为更小的块。...然后,你可以使用 MySQL 客户端逐个导入这些文件。
/** * @author : zanglikun * @date : 2021/10/28 20:36 * @Version: 1.0 * @Desc : 读取文件大小 转成K、KB、MB、GB...* 1024 * 1024 * 1024 * 1024)); System.out.println(printFileSize(Long.MAX_VALUE)); } } 输出的结果是
在servlet上传图片到MySQL数据库过程中,MySQL存储文件大小是有限制的,比如数据库只能存储1M文件的大小,上传的文件就不能超过这个限制,如果超过限制就会报以下的错误信息: 故障现象:数据存储文件的时候报...以上的问题就是上传文件的大小已经超过数据库限制的大小,导致数据库存储不了文件,所以这个时候我们需要重新设置数据库存储文件的大小: 从报错看是 mysql的 max_allowed_packet参数值设置太少了...,用show VARIABLES like ‘%max_allowed_packet%’;查看,显示的是1M(1024x1024),这当然就有问题了,超过1M就存不了 MySQL根据配置文件会限制server...有时候大的插入和更新会被max_allowed_packet 参数限制掉,导致失败,要重新设置参数可以在MySQL命令行中运行: set global max_allowed_packet = 2x1024x1024x10...然后关闭掉这此MySQL Server链接,再重新连接。
在Excel作图完成后,很多时候需要保存后在其他地方使用,大部分人选择截图,虽然很方便,但是不清晰。按照下面的方法,以输出高清的图片。...01)选中想输出的图片,点击Excel右上角复,单击复制为图片(P)... ? 02)打开PPT空白页面,Ctrl+V粘贴 ?...03)在PPT中调整图片大小,在此调节的图片尺寸越大,最后输出的图片越清晰 ? 04)图片调整完成后,右击另存为图片(S)... ?...07)在画图中点击另存为就可以输出各种格式的高清图片了。 ? 可以看到,最后形成的照片为3.1M,如果选择的尺寸更大,文件会更清晰 ? 放个黑色的结尾 ?
环境:python3.5 Excel表格 通过查阅资料,发现python excel有关的库有两组,一组是xlrd、xlwt、xlutils,另一组是openpyxl。...- 第一组(xlrd、xlwt、xlutils)支持在Excel 97-2003甚至是更早的版本。 - 第二组(openpyxl)支持Excel 2010版本。...然而已经2017,时光匆匆… 所以笔者不推荐输出Excel如.xlsx格式,更好的建议有pymysql数据库以及如下介绍的CSV格式。...ps:真想输出.xlsx,推荐网站->直戳 CSV文件 定义——逗号分隔值(Comma-Separated Values,CSV,有时也称为字符分隔值),其文件以纯文本形式存储表格数据(数字和文本)。...使用——完全可以用excel打开,如图 ?
按照以往的方式使用navicat将查询出来的表结果以excel的形式导出。...导出至本地打开excel后发现算上表头一共才65536行数据,凭借计算机程序员的专业嗅觉,发现这个真正的数据行65535这个数字不是碰巧出现的。带着疑问进行一番排查。...原因 Excel 97-2003 中,工作表的大小为 256 列 × 65,536 行,sheet表名最大32位 Excel 2010 和 Excel 2007 中,工作表的大小为 16,384 列 ×...1,048,576 行, 在 Excel 中,超出最大行列数单元格中的数据将会丢失。
MySQL联合查询 联合查询:union,将多次查询(多条select语句)的结果,在字段数相同的情况下,在记录的层次上进行拼接。...执行如下 SQL 语句,进行测试: — 联合查询,默认去重 select * from class union distinct select * from class; — 联合查询,保留所有记录 select...特别地,联合查询只要求字段数相同,而跟类型无关。...意义 联合查询的意义有两种,分别为: 查询同一张表,按时需要不同,例如查询学生信息,要求男生按年龄升序排序,女生按年龄降序排序; 多表查询,多张表的结构是完全一样的,保持的数据结构也是一样的。...根据我们刚刚学到的联合查询,貌似很容易啊!
首先明确一个概念,innodb表包含两部分,表结构定义和数据,Mysql8.0以前表结构定义存放在.frm为后缀的文件里,而Mysql8.0版本以后允许表结构定义放到系统数据表中,因为表结构定义占用的空间很小...这个行为由参数innodb_file_per_table控制, 这个参数为OFF的时候,说明表的数据存放在系统共享表空间,也就是跟数据字典放在一起 如果这个参数是ON的时候,说明表的数据放到单独的文件中,Mysql5.6.6...的数据全部删除,PageA页就会被标记为可复用,这个时候插入一条id=50的时候,要创建新的数据页的时候,就会复用pageA, 现在我们知道delete 命令只会把记录的位置或数据页标记为可复用,但是磁盘的文件大小不会变小...我们可以使用下面命令重建表,在mysql5.5版本之前,这个命令的执行流程跟我们前面描述的差不多,区别就是这个临时表B不需要手动创建,MySql会自动完成转存数据,就换表明,删除旧表的操作 ?...显然上图中最花时间的步骤是往临时表插入数据的过程,如果整个过程中,有新的数据写入是不被允许的,这个就会造成数据丢失,表A不会有数据的更新,这个DDL不是Online的 但是在mysql5.6版本开始引入
,无论是这款PyCharm还是IntelliJ、Goland在形参处的名称提示太方便了 网络爬虫 爬虫就是建立一个与某个网站的连接 通过该连接获取输入流,读取网站内容 实质上就是一个socket的输入输出操作...选股宝数据 爬取下来页面内容后,输出查看发现与我们在浏览器里看到的页面不同,body中只有空标签 这是因为选股宝为了实时更新页面数据 内容都是通过js定时器定时发送ajax请求以后渲染数据到页面中 分析网站...输出到Excel 这里要用到第三方的库 xlwt 这是一个python向excel文件输出内容的库,不依赖其他第三方库 安装后 使用命令 xls = xlwt.Workbook() sheet = xls.add_sheet...snapshot: sheet.write(0, col, info[0]) col=col+1 xls.save(yourSavePath) 最后一段代码是把每个field的名字写入excel...excel结果 去除第一行的field名称 总共12924条股票信息 运行时间差不多一小时,才输出完毕
其实php输出excel倒是很简单 第一: <?...php header("Content-Type: application/vnd.ms-excel; charset=gb2312"); //解释下,这里为何用gb2312,因为默认windows...php header("Content-Type: application/vnd.ms-excel; charset=gb2312"); header("Content-Disposition:filename
慢查询日志概念 MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中...默认情况下,Mysql数据库并不启动慢查询日志,需要我们手动来设置这个参数,当然,如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。...log-slow-queries :旧版(5.6以下版本)MySQL数据库慢查询日志存储路径。...开启了慢查询日志只对当前数据库生效,如果MySQL重启后则会失效。.../mysql/mysql06_slow.log 得到按照时间排序的前10条里面含有左连接的查询语句。
= 不相等 > 大于 >= 大于等于 < 小于 <= 小于等于 BETWEEN 位于两个数值之间 查询价格小于10.2的水果 mysql> SELECT f_name,f_price FROM fruits...查询指定范围内的条件记录,将所有的查询条件用括号括起来。...,就返回一个结果作为外层查询的条件。...27 | +------+ 1 row in set (0.00 sec) EXISTS EXISTS 关键字后面的参数是一个任意的子查询,系统对子查询进行运算判断是否返回行,主要至少返回一行,那么EXIST...此时外层语句不做任何查询。
:索引没有设计好、SQL 语句没写好、MySQL 选错了索引 ’mysql慢查询优化 第一步:开启mysql慢查询日志,通过慢查询日志定位到执行较慢的SQL语句。...查询SQL语句的执行计划.png)] 字段 含义 id select查询的序列号,表示查询中执行select子句或操作表的顺序 select_type 表示 SELECT 的类型 table 输出结果集的表...存储过程的信息对查询的影响情况 EXPLAIN 不考虑各种 Cache EXPLAIN 不能显示 MySQL 在执行查询时的动态,因为执行计划在执行查询之前生成 EXPALIN 部分统计信息是估算的,并非精确值...SUBQUERY 在 SUBQUERY 基础上,子查询中的第一个SELECT,取决于外部的查询 DERIVED 在 FROM 列表中包含的子查询,被标记为 DERIVED(衍生),MYSQL会递归执行这些子查询...possible_keys: 指出 MySQL 能使用哪个索引在表中找到记录,查询涉及到的字段上若存在索引,则该索引将被列出,但不一定被查询使用 如果该列是 NULL,则没有相关的索引 key: 显示
在MS Sql Server中可以能过以下的方法查询出磁盘空间的使用情况及各数据库数据文件及日志文件的大小及使用利用率: 1、查询各个磁盘分区的剩余空间: Exec master.dbo.xp_fixeddrives...2、查询数据库的数据文件及日志文件的相关信息(包括文件组、当前文件大小、文件最大值、文件增长设置、文件逻辑名、文件路径等) select * from [数据库名]....[sysfiles] 转换文件大小单位为MB: select name, convert(float,size) * (8192.0/1024.0)/1024. from [数据库名].dbo.sysfiles...3、查询当前数据库的磁盘使用情况: Exec sp_spaceused 4、查询数据库服务器各数据库日志文件的大小及利用率 DBCC SQLPERF(LOGSPACE)
目录 联合查询 子查询 分页查询 联合查询 联合查询是指将多个查询结果合并成一个结果集(二维表),通常出现在统计分析中。 语法: 查询语句1 UNION 查询语句2 UNION ......查询语句N 注意: 1.所有查询语句的返回结果的列数必须相等 2.每列的数据类型必须一致,【查询语句1中字段列表的类型必须和查询语句2中的字段列表类型对应且一致】 代码实例: SELECT user_id...子查询分类: 按结果及行数分: 1、 标量子查询(单行子查询:结果集只有一行一列) 2、 列子查询(多行子查询:结果集多行一列) 3、 行子查询(结果集有多行多列) 4、 表子查询(结果集有多行多列)...按出现位置分: 1、 SELECT 后面:只能出现标量子查询 2、 FROM 后面:表子查询(查询结果必须起别名) 3、 WHERE|HAVING:支持标量子查询,列子查询,行子查询 4、 EXISTS...后面:支持表子查询 代码实例: 查询订单信息,并显示用户姓名 SELECT a.
Title - XLSX Workbench输出多个Sheet 一 数据准备 今天说一下如何使用XLSX Workbench输出多个Sheet 我们根据上一篇文章所用得数据SFLIGHT(航班信息)...,我们再引入两张table(SCARR,SPFLI)作为Sheet2 Shee3得输出表,接着上一次的文章->Excel高效输出工具-XLSX Workbench 首先我们在前面取数部分取出航线和航班计划数据...,这个节点就是用来让数据向下输出(你可以理解为换行,因为每输出完一行数据,是需要换行的暨向下输出数据) 然后再FOLDER_SCARR_ITEM下面添加LOOP_SCARR_ITEM-用来循环每一行行内的数据...然后再LOOP_SCARR_ITEM下面添加结构PATTERN_SCARR_ITEM,以及下一层的内容CONTEXT_SCARR_ITEM,绑定Excel中ITEM1位置,输出方向是向右 将LOOP_SCARR_HEADER...运行程序,点击Down Excel可以看到下载下来的excel为: Sheet1 Sheet2 Sheet3 如果需要像Sheet1一样设置抬头,我们可以在ZXWLB_S_COMMAN_HEADER
MySQL 子查询 嵌套查询 一、带IN关键字的子查询 二、带EXISTS关键字的查询 三、带ANY、SOME 关键字的子查询 四、带ALL 关键字的查询 自言自语 一、带IN关键字的子查询 使用IN...关键字进行子查询的时候,内层查询语句仅仅返回一个数据列。...语法格式: SELECT 查询字段 FROM 表名 WHERE 字段名 [NOT] IN (SELECT 语句); 二、带EXISTS关键字的查询 意思就是内层的select查到了(至少查到了一行)才进行查询...,没有查到就不进行查询。...只要满足内层子查询中的任何一个比较条件,就返回一个结果作为外层查询的条件。 (满足任意一个) 语法格式: SELECT 查询字段 FROM 表名 WHERE 字段名 比较运算符(>,<..)
领取专属 10元无门槛券
手把手带您无忧上云