一般情况下,我们如果需要添加列,可以一列一列根据需要进行添加,那如果我们需要根据固定的需求进行批量添加,那如何操作呢? 原始表 ? 结果表 ?...我们在添加的列的时候,有2个主要参数,一个是标题,一个则是添加列里的内容,如果我们需要进行批量添加的话,这2个参数最好是作为变量进行循环填充。我们来看下如何操作吧。...列数:需要增加多少列,就根据相应的填写。 2. x代表的是表格,也就是增加列后的表格名称,初始值是原始表格。 3. y代表的是第几次的循环,0代表第一次,同时也是作为参数组里的列对应值的位置。...4. each代表的是作为Table.AddColumn函数中所对应的。 这样我们就很很容易的可以进行批量进行所需要添加的列。 需要注意的几个地方: 1....赋值常数和函数的书写方式批量也不一样 例如: each 改成(a)=>格式,另外直接赋值常数和函数的书写方式也不一样,所以要进行判断区分。当然你也可以统一写成函数模式,直接调用。
; 第2参数是需要改变的列及操作(正常情况是由列名和操作函数组成,也可以是空列表); 第3参是去除第2参数中指定后剩余的列所需要进行处理的函数; 第4参数是找不到第2参数指定的列标题时是忽略处理(1)还是返回错误处理...例3 第3个参数是一个函数,是在第2参数指定列以外表格中的所有列需要进行的操作。 在前面的操作中,成绩列和学科列都有了操作,那剩余其他列(姓名列)也需要进行操作,那就要使用到第3参数了。...如果第2参数的中的学科写错或者定义了其他未在操作表中的列名,则可以通过第4参数来控制返回。...因为指定的列里有 “班级”,但是在原来的表格中不存在,所以会产生错误,但是第4参数有指定1,也就是忽略错误,最终返回的结果如图所示。除了找到的成绩列表外,其余的列数据都在后面添加了个“A”。 ?...例5 如果是想让所有的列都进行同样的操作,也就是不指定列,使得把所有列都是作为其他列来处理,使用的是第3参数来进行操作的话,此时第2参数可以直接使用空列来表示,也就是不指定列。
本篇文章主体部分为翻译Chris Webb的一篇文章。 合并查询在Power Query中是很成熟的应用,相当于SQL中的各种JOIN(抽时间会写几篇SQL的join,算是SQL的小核心)。...但同时,在Power Query中合并查询是一个常见的影响刷新效率的因素。在我的工作中,经常会遇到对一些非文件夹性质的数据源进行合并查询操作,所以我一直在想,有没有办法可以对其进行优化。...: 表中列的数量是否影响合并查询时的效率?...– 0 秒 以上的确能够得出结论:合并查询时,列数的多少的确会影响效率, 以上还揭示了:在以上两个查询中,读取数据是立刻发生的,几乎不占用时间,相比之下,最开始的两次查询中读取数据的时间甚至要比执行SQL...参考文档: Chris Webb https://blog.crossjoin.co.uk/2020/05/31/optimising-the-performance-of-power-query-merges-in-power-bi-part
但是,如果使用Excel中的Power Query和Power Pivot商务智能组件,即使是上百万行数据,也可以在短时间内快速完成处理和分析。...其实,Power BI中的Power Query和Power Pivot最早是以Excel为载体的。...那么,有没有一本书可以一次性讲解Power Query和Power Pivot在Excel中的使用呢?...全书共11章: 第1章介绍Excel中的Power Query和Power Pivot两大商务智能组件及其功能; 第2章至第6章介绍如何使用Power Query来获取数据并进行处理,主要包含Power...3.1 入门基础知识 3.1.1 数据类型的设置 3.1.2 标题的升降设置 3.1.3 “转换”与“添加列”选项卡中的功能 3.2 删除行或列操作 3.2.1 选择列与删除列 3.2.2 删除行与保留行
之前我们有聊到Excel中会有一些完成不了的分列,这次我们来看下在Power Query中如何进行。...分列数据的方法比较 在Power Query中大部分分割操作可以直接通过菜单进行,在拆分列菜单中主要有2个选择,一个是按分隔符,另外一个是按字符数。 ? 1. 通过换行符进行分隔 ? ?...换行符也是分隔符的一种,可以通过换行符进行分隔,所以直接选择按分隔符进入菜单。在进入到菜单后,系统会自动辨认可能需要进行分隔,如果正确就不需要修改,如果不正确则可以手动删除后更改。 2....分隔后按行排序 在Power Query中,不仅可以分割后按列进行,还可以按行进行。 ? ?...简简单单的一个函数既可以作为一个工具灵活使用,相当于一个模版,参数直接在Excel表格里面填写即可实现所需要的功能。 ? 可以仔细观察跳过1次和跳过0次的区别。
Query菜单操作表的函数 Power Query中M语言的3大主要语句结构 Power Query中Excel数据的导入介绍 Power Query的数据转换方法(From) Power Query...—表格篇(6) 如何在Power Query中获取数据——表格篇(7) Power Query中的Table.Group函数详细分析 Power Query中@的用法—递归 Power Query中批量处理操作...如何批量抓取企业的公示信息? 如何获取图片中的文字信息? 如何在Excel及Power BI中对中文日期进行排序? 如何批量一步抓取搜索栏的联想词? 如何快速的获得一些购物网站的产品信息?...分列数据的方法比较 如何用Power Query处理Excel中解决不了的分列 Power Query中如何把多列数据合并? Power Query中如何把多列数据合并?...升级篇 Power Query中单列数据按需转多列 在Power Query中如何进行类似"*"的模糊匹配查找? 如何在Power Query中达到函数Vlookup的效果?
请记住,虽然本书的重点是 Excel 和 Power BI,但这些步骤对于任何承载 Power Query 的工具来说几乎是相同的,即使它包含在其他微软产品或服务中。...4.1 在工具之间复制查询 为了说明如何在工具之间迁移 Power Query 查询,这里先从一个在 Excel 中建立的查询链开始,其结构如图 4-1 所示。...中使用 Power Pivot 数据模型,对于引用了原 Excel 工作簿中的表格的查询,应该 “导入模式”。...图 4-20 “Date” 列数据正常显示 记住,如第 3 章数据类型和错误中所述,一旦更改了数据类型,任何后续的更改都将基于这个输出。...进入字段列表,展开 “Calendar”,选择 “Month Short” 列。 图 4-22 这看起来很熟悉 此时,用户可能会认为所有结果都与前面示例中的结果相同。
在其他使用 Power Query 的工具中,如 SSIS 和 Azure Data Factory ,只支持单个查询。如果未来需要将解决方案移植到这些平台之一,那么使用单个查询是一个更好的选择。...总是可以看到所有的东西是如何在一个单一的视图中联系在一起的,并对查询进行最小修改,从而使转换过程处于最理想的状态。 当使用查询诊断工具和检查更高级的特性(如查询折叠和检查查询计划)时,这非常有用。...Power Query 不仅需要从 “CSV” 文件中调用相同的数据,而且还必须处理 “暂存” 查询的所有步骤,然后才能处理和加载 “客户” 查询的结果。...2.3.2 在 Excel 中选择加载目的地 虽然 Power BI 很容易操作,但 Excel 中却略有复杂。...在 Power BI 中可以单独配置每个查询,而 Excel 只允许用户在一个 Power Query 会话中创建的所有查询选择一个加载目的地(自 Power Query 编辑器可以在 Excel 中使用以来
,以及它在这两个工具中的相同之处。...本书后续内容均保持查询步骤使用英语以便理解最佳实践,当然这不是必须的,在查询步骤中使用本地化语言,如:中文对 Power Query 的使用没有任何影响,取决于个人习惯。)...图 1-11 这两个重命名操作已被合并为一个 “Renamed Columns” 步骤中 请注意,无论是右击并【重命名】列还是双击列重名它,这里的结果都是相同的。...至于如何在 Excel 中启动 Power Query 编辑器的选项,这些是可以自由选择的。 进入【数据】选项卡【获取数据】【启动 Power Query 编辑器】。...【注意】 虽然可以在【应用的步骤】窗口中选择每个步骤来验证程序是否仍然工作,但这里不需要这样做。由于此数据具有与前一个文件相同的结构,因此将毫无问题地应用每个步骤。没有必要选择他们来检查这一点。
与任何数据源一样,当从 Excel 表导入时,Power Query 将获得数据,然后尝试为每一列设置数据类型。应该注意到,在这个过程中,Excel 工作表中的数据格式被忽略了。...图 6-4 如果 Power Query 提供了这个选项,请单击【取消】 【警告】 如果用户单击【确定】,Excel 将把数据转换成一个表,但它会为这个表选择了一个默认的名称(如 Table1 ),然后立即启动...需要注意的是,用户从预览窗口选择一个表或者同时选择多个表,【应用的步骤】窗口中的步骤都是相同的。...另外,当连接到一个外部工作簿时,Power Query 总是先连接到该工作簿的路径,再导航到用户所选择的对象中,然后再连接到工作簿中。...不幸的是,在 Power Query 的一个会话中建立了所有这些查询,用户只能在 Excel 中选择一个加载目的地。由于用户希望它们中的大部分都能加载到工作表中,所以可以按以下方式来处理。
---- Power Query基础学习: 初步认识Excel中的Power Query 初步认识Power Query主界面 Power Query基础概念 Power Query函数整体概况 Power...Query菜单操作表的函数 Power Query中M语言的3大主要语句结构 Power Query中Excel数据的导入介绍 Power Query的数据转换方法(From) Power Query...中提取数据——列表篇(3) 如何在Power Query中提取数据——列表篇(4) 如何在Power Query中获取数据——表格篇(1) 如何在Power Query中获取数据——表格篇(2) 如何在...Power Query中获取数据——表格篇(3) 如何在Power Query中获取数据——表格篇(4) 如何在Power Query中获取数据——表格篇(5) 如何在Power Query中获取数据—...—表格篇(6) 如何在Power Query中获取数据——表格篇(7) Power Query中的Table.Group函数详细分析 Power Query中@的用法—递归 Power Query中批量处理操作
,或者使用 Power BI 从 Excel 表中读取数据,以下方法都是可以的。...如果用分隔符连接,就会得到每个都是唯一值如:“64010-150、64020-150、64010-250” 等。在左边的 “Transaction” 表中也可以看到这种相同的情况。...图 10-10 使用复合键连接【合并】表 连接列的顺序将按照用户选择它们的顺序用 “1”、“2”、…… 来表示。请记住,只要选择顺序一致,数据列在查询之间不需要相同的顺序。...图 10-21【右反】连接:右表中的记录在左表中没有匹配值 使用到目前为止一直使用的相同模式,但【连接种类】选择【右反】将产生如图 10-22 所示的结果。...图 10-33 更新的查找表(“Prices” 查询) 【注意】 虽然选择重命名查找表中的 “Key” 列,但如果愿意,可以重命名源表中的 “Key” 列。最终目标只是确保每个表中的列名相同。
不是所有的区域都会生产相同的产品,所以文件的列数也不相同。 文件名中的区域名称必须被保留。 需要从子文件夹名称中保留日期格式(例如“2019 Q4”)。...图9-6 显示文件夹(和子文件夹)中所有文件的预览窗口 需要认识到的重要一点是,这个视图遵循前面显示的模式,所有列出的列的顺序完全相同。 只要连接到一个本地文件夹就行了。...选择【示例文件】。 此时,Power Query 将执行它的魔法,创建四个新的查询,并在主查询中添加一系列步骤。...列:“Year”,“Quarter”。 结果(在 Excel 和 Power BI 中)如图9-24所示。此时 Power BI 中展开到了季度级别来显示季度数据。...Query 真经 - 第 2 章 - 查询管理 Power Query 真经 - 第 3 章 - 数据类型与错误 Power Query 真经 - 第 4 章 - 在 Excel 和 Power BI
在Power BI产品线价格带分析:以耐克、阿迪达斯、安踏和李宁为例中,笔者展示了价位带分析的图表制作方式,涉及的分析维度包含了描述性统计指标。 很多读者倾向于表格。...Power Query提供了一个函数,可以在Power BI和Excel中解决此问题,以下以Excel为例说明。...例如需要同时分析四个品牌的价位带,将数据如下图导入Power Query: 默认导入的数据和Excel界面相同,此处需要将数据不展开。...在分组依据中,选择所有行,按照品牌进行分组: 添加自定义列,输入Table.Profile: 展开自定义列,并筛选零售价后,可以得到以下统计结果,包含最大值、最小值、平均值、标准差等。...当然,你也可以使用Excel函数或者一大票DAX,如DISTINCTCOUNT、MAX、MIN、AVERAGE、MEDIAN等。
图 11-2 和连接到本地 Excel 文件有差别吗 这是 Power Query 团队设计这个软件的一致性。虽然连接器有所不同,但该过程的其余部分与处理存储在本地的文件相同。...这里的目的是选择第 1 列中的第一个单元格,输入要为第一条记录提取的内容,Power Query 将完成其余工作,如图 11-6 所示。...单击它,在【元素】窗口中选择该元素。 一旦用户这样做了,用户就可以开始痛苦的第二部分;在 Power Query 中重复刚刚寻找表格元素的步骤。...在本例中,这里有 HTML ,在浏览器的顶部可以看到 相同的,如图 11-13 所示。 单击 “Children” 列中的表格以深入查看。...不幸的是,这远比没有表标签或 CSS 要更复杂,对于采用了优化网页加载技术的网站(如延迟加载内容)可能意味着 Power Query 抓取数据时看不到完整的页面,因为它在完全加载之前就确定了页面结构,Power
之前给大家推荐了:Python处理Excel用哪个库?Pandas不是唯一选择 在做资料检索的过程中,我有了一个意外发现:微软的Excel,已经支持Python了?!...3 步启用 Excel 中的 Python,比安装插件还简单 第 1 步:插入 Python 公式 两种方式启动 Python 模式: 按钮启动:选中单元格,点击「公式」选项卡中的「插入 Python...必须用 Power Query) 由于 Excel 中的 Python 禁用本地文件读取,需先通过 Power Query 导入数据: 点击「数据 > 获取和转换数据 > 从文件 > 从 Excel...在 Power Query 编辑器中加载数据,点击「关闭并上载」,数据会显示在新工作表中(假设表名为「销售数据」)。...现在,整个流程能在 Excel 中闭环: 数据导入:Power Query 替代 pandas.read_excel,直接对接数据库、网页数据或本地文件。
3.1 数据类型与格式 在现场课程、博客评论和论坛帖子中经常收到的一个问题是:“如何在 Power Query 或 Power BI 中格式化数据?”...相反,如果选择的是【替换当前转换】而不是【添加新步骤】,结果将会大不相同。...3.1.5 数据类型的重要性 既然无论如何都要在 Excel 或 Power BI 中格式化数据,而错误地选择数据类型会影响数据的精确性,那么能不能不在 Power Query 中设置数据类型呢?...当选择加载数据时,Power Query 会将用户构建的模式应用于整个数据集。通过这种方式,它避免了必须预先加载所有数据的负担。...在 Excel 的【查询和连接】窗格或 Power Query 中编辑器【查询】导航器中,都可以通过以下操作删除错误查询。 选择 “ErrorData 中的错误” 查询并按下 DEL 键。
本期文章,我们将讲解如何在Excel的Power Pivot和Power BI中分别对度量值进行分类管理,方便我们对度量值进行管理和维护。...---- 本期导读 一、Excel的Power Pivot中用表管理度量值 二、Power BI中按文件夹分类管理度量值 ---- 一、Excel的Power Pivot中用表管理度量值 在Excel...具体的步骤如下。 第1步:在Power Query中创建指定数量的空查询。如下图所示。...第3步:在Power Pivot中,分别将存放度量值的表中的列进行隐藏,可以选择列名后选择"从客户端工具中隐藏"选项。如下图所示。 最后将相应的度量值放置于对应表中。结果如图所示。...第1步:新建一个空表,命名为度量值,同时将列隐藏,或者在Power Query查询中新建一个空查询,这两个都是一样的操作。如图所示。
标签:Python与Excel,pandas 在Excel中,我们经常会遇到要将文本拆分。Excel中的文本拆分为列,可以使用公式、“分列”功能或Power Query来实现。...为了自动化这些手工操作,本文将展示如何在Python数据框架中将文本拆分为列。...矢量化操作(在表面上)相当于Excel的“分列”按钮或Power Query的“拆分列”,我们在其中选择一列并对整个列执行某些操作。...一旦我们将Excel表加载到pandas中,整个表将成为pandas数据框架,“出生日期”列将成为pandas系列。因为我们不能循环,所以需要一种方法来访问该系列中的字符串元素。...字符串本质上类似于元组,我们可以对字符串使用相同的列表切片技术。看看下面的例子。
完成后,三个查询都应该在 Excel 的【查询 & 连接】窗格中,或在 Power Query 编辑器的【查询】导航窗格中也可看见,如图 8-2 所示。...图 8-4 将 “Feb 2008” 查询追加到 “Transactions” 查询的结果 【注意】 如果用户直接从 Excel 用户界面【追加】查询(或者在 Power Query 窗口中,选择 “Jan...但事实如这里所示,追加和编辑单独的追加项,是一项重要的技能,用户必须掌握它,才能熟练地使用 Power Query。...8.2 追加列标题不同的数据 在【追加】查询时,只要被合并的查询的列标题是相同的,第二个查询就会按用户所期望的那样被【追加】到第一个查询上。但是,如果这些列没有相同的列标题呢?...图 8-20 新查询显示在所有工作簿查询的列表中 【注意】 如果在选择 “Source” 步骤时没有看到 “Certificates” 表,那因为 Power Query 已经缓存了数据预览。