方法介绍：distinct 关键字、group by 、row_number ()over(partition by 列 order by 列 desc)
最近在工作中，在写oracle统计查询的时候，遇到listagg聚合函数分组聚合之后出现很多重复数据的问题，于是研究了一下listagg去重的几种方法，以下通过实例讲解三种实现listagg去重的方法。
2018 年，对于数据库领域也将是重要的一年，Oracle 全新的 18c 版本将很快发布，而我认为，这将标志着一个时代的终结，同样是一个新时代的开启。 2017年10月1日，我在旧金山OOW大会现场，感受了Larry Ellison发布Oracle Database 18c产品的盛况，18c被称为数据库领域的第一个自治产品，能够实现自我驱动、自我安全和自我修复，事实上就是最大程度的减少了人工的参与。 业界在感叹技术进步的同时，也存在一股淡淡的忧虑和哀伤，因为一个重要的岗位 - DBA可能不再重要，或者不
oracle的sql语句 进行去重 应用背景 查询出多条数据，这些数据中有一个或者多个字段的值一样，现在要对一样数据进行去重。 oracle的sql语句 select * from ( select tf.*,ROW_NUMBER() OVER(PARTITION BY ** ORDER BY * DESC ) RN from info tf ) from test where test .rn = 1
有反馈应用测试连接Oracle数据库的会话半小时左右未做操作就会被中断，报错ORA-3113，询问数据库是否有这样的超时设置，能否取消掉这个限制？ 登上环境查看监听日志发现连接的IP和数据库IP不是同一网段，故询问中间是否有防火墙设备，得到肯定的答复后，再结合实际的现象，基本也就确认是由于防火墙默认强制断开一段时间内（这里也就是半小时）都是空闲状态的会话，然后会话再做操作时就会发现原连接已经被断开，报错ORA-3113，然后只能重连。 防火墙涉及其他部门管理，协调比较麻烦。还好Oracle有DCD（Dead Connection Detection）这个功能特性，主要就是设置一个时间比如10分钟，那么每隔10分钟Oracle就会发一个空包给连接会话的客户端，防火墙发现会话变为活跃就会重新计时，这样也可以间接解决这个问题。
序言：优化器是Oracle数据库最引人入胜的部件之一，因为它对每一个SQL语句的处理都必不可少。优化器为每个SQL语句确定最有效的执行计划，这是基于给定的查询的结构，可用的关于底层对象的统计信息，以及所有与优化器和执行相关的特性。 本文来自Oracle 白皮书翻译（译者：苏旭辉 newkid），介绍了在Oracle数据库12c第二版中与优化器和统计信息相关的所有新特性并且提供了简单的，可再现的例子，使得你能够更容易地熟悉它们，尤其是当你从早先的版本进行迁移的时候。它还概括了已有的功能是如何被增强以改善性能
本博文的主要目的是让笔者和读者可以了解并掌握以下内容： 1、Crontab的基本概念 2、Crontab的基本组成 3、操作Crond服务 4、配置系统和用户计划任务 5、监控计划任务日志
原作者：Bane Radulovic 译者： 魏兴华 审核： 魏兴华 DBGeeK社区联合出品 原文链接：http://asmsupportguy.blogspot.sg/2014/02/acfs-disk-group-rebalance.html ACFS disk group rebalance 从Oracle 11.2版本开始，可以在ASM磁盘组之上创建通用的集群文件系统，被称为Oracle ASM Cluster File Systems或Oracle ACFS。要想创建一个ACFS文件
大家好，我是ABC_123。前不久遇到一个Oracle注入漏洞，是搜索型的盲注漏洞，只能用折半法一个字符一个字符的猜解数据，使用sqlmap可以直接跑出来，经过判断是DBA权限。接下来就是想办法通过这个注入点获取操作系统的权限，但是遇到了很多问题，于是搭建环境研究了一天，最后终于获取系统权限，本期ABC_123就把这个案例分享给大家。
说明：此Driver的默认端口是3306。如果没有在连接字符串中特别指出就是连接Mysql的3306端口。
** 1.无ORDER BY排序的写法。(效率最高) (经过测试，此方法成本最低，只嵌套一层，速度最快！即使查询的数据量再大，也几乎不受影响，速度依然！) SELECT *
Last Updated: Friday, 2004-11-26 9:48 Eygle
在使用SQL提数的时候，常会遇到表内有重复值的时候，比如我们想得到 uv （独立访客），就需要做去重。
来自：blog.csdn.net/xienan_ds_zj/article/details/103869048
每月关注：26 页数据库技术干货，汇总一个月数据库行业热点事件、新的产品特性，包括重要数据库产品发布、警报、更新、新版本、补丁等。
Last Updated: Saturday, 2004-11-20 12:47 Eygle
其中 demo101_t1(以下简称t1)和demo101_t2(以下简称t2)都是大表(几千万以上记录), 两表关联字段上重复值都比较少,如果t2表上不创建合适的索引, 这个SQL的执行效率将会是极差的(t2表做几千万次的全表扫描,估计要执行几天吧),执行计划是这样的:
20 日大早上还在睡眠中，就被电话吵醒了，监控值班同事打电话告诉有一台生产数据库连接失败，出现紧急事件，今天刚好我值班，便开始了今日的远程工作，迷迷糊糊、朦朦胧胧地打开电脑便去登陆环境，可能当时没睡醒脑子还不好使吧，当登陆上去后发现数据库实例确实宕机了，庆幸的是还有另一个节点可以正常访问，便不慌不忙的在 SQLPLUS 命令行敲了启动命令，便出现了如下的画面。。。
1.TAF(Transparent Application Failover)即透明应用程序故障转移技术。当初始化连接出现问题无法连接时，该功能可以保证应用程序重新连接到可用服务。在重新连接过程中，之前的活动事务将会被回滚，但在“具体条件”下TAF可以保证SELECT语句不被终止。
今天没有注意所用的数据库是建立在32位的Windows上的，看到内存有8G，就马上将Oracle的SGA改为5G了，结查重起Oracle时马上报 out of memory的错。
墨天轮原文链接：https://www.modb.pro/db/22964?ywm 在 Oracle 数据库中，经常可以见到一个特殊的等待事件：Sync ASM rebalance 。这个等待事件的基
实现方法： 1、 开始－＞设置－＞控制面板－＞管理工具－＞服务 停止所有Oracle服务。 2、 开始－＞程序－＞Oracle – OraHome81－＞Oracle Installation Products－＞ Universal Installer 卸装所有Oracle产品，但Universal Installer本身不能被删除 3、 运行regedit，选择HKEY_LOCAL_MACHINE\SOFTWARE\ORACLE，按del键删除这个入口。 4、 运行regedit，选择HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services，滚动 这个列表，删除所有Oracle入口。 5、 运行regedit， HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Eventlog\Application， 删除所有Oracle入口。 6、 开始－＞设置－＞控制面板－＞系统－＞高级－＞环境变量 删除环境变量CLASSPATH和PATH中有关Oracle的设定 7、 从桌面上、STARTUP（启动）组、程序菜单中，删除所有有关Oracle的组和图标 8、 删除\Program Files\Oracle目录 9、 重新启动计算机，重起后才能完全删除Oracle所在目录 10、 删除与Oracle有关的文件，选择Oracle所在的缺省目录C:\Oracle，删除这个入 口目录及所有子目录，并从Windows 2000目录（一般为C:\WINNT）下删除以下文 件ORACLE.INI、oradim73.INI、oradim80.INI、oraodbc.ini等等。 11、 WIN.INI文件中若有[ORACLE]的标记段，删除该段 12、 如有必要，删除所有Oracle相关的ODBC的DSN 13、 到事件查看器中，删除Oracle相关的日志
点击关注公众号，Java干货及时送达 在使用SQL提数的时候，常会遇到表内有重复值的时候，比如我们想得到 uv （独立访客），就需要做去重。 在 MySQL 中通常是使用 distinct 或 group by子句，但在支持窗口函数的 sql（如Hive SQL、Oracle等等） 中还可以使用 row_number 窗口函数进行去重。 举个栗子，现有这样一张表 task： 备注： task_id: 任务id; order_id: 订单id; start_time: 开始时间 注意：一个任务对应多条订单
守护撤回了一条消息 【潜水】 A 2019/1/15 8:50:46 之前的做法是先卸数到数据文件，如果调度出问题，第二天还可以从数据文件再重新把数据加载上去，还有什么其他的方法吗 【话唠】B 2019/1/15 8:53:04 增量数据，还是全量 【话唠】B 2019/1/15 8:54:27 源库数据归档备份几天呢，这方法可行？ 【潜水】A 2019/1/15 9:08:21 有的增量有的全量，考虑在不动源库的情况下，源库可能已经有备份机制，在仓库也考虑一下这个情况的处理～ 【活跃】C 2019/1/15 9:26:16 ETL不应该都支持重跑历史么？ 前一天挂了，第二天重跑一下就好了，只要调度工具支持重跑，ETL的代码也要写成支持重跑的。 【冒泡】D 2019/1/15 9:51:28 Indeed 贴源缓冲+作业重跑机制，一般是调度要支持N次自动失败重跑。 【话唠】B 2019/1/15 9:54:37 @C 它这是从源库抽取到ods，正常业务系统源库不保存历史，只保留最新的，如果是ods到dwd，在仓库里，当然可以重跑。 【话唠】B 2019/1/15 9:56:31 n次自动失败重跑，作业预警，发短信，邮件？ 【潜水】A 2019/1/15 10:04:03 @ 是的，只能支持库内重跑，源库只有最新 【潜水】A 2019/1/15 10:05:36 @ @ 现在确实没有失败自动重跑的机制，考虑加一下，请问下你们做etl一般会做卸数到数据文件，备份数据文件的操作吗 【潜水】A 2019/1/15 10:08:05 其实可以直接不用卸数可以直接从源库加载带仓库，但是考虑一个异常情况和数据的备份，为了更安全，加上卸数到数据文件的操作，一般有没有必要呢想了解一下 【冒泡】E 2019/1/15 10:11:48 @A 一般都是要卸载为文件，源库是不断变化的，你的度量会丢失 【群主】北京-胖子哥(1106110976) 2019/1/15 10:12:21 这个里面就可以看到ODS的价值了。 ODS存储短周期，贴源数据 【话唠】B 2019/1/15 10:20:15 @A 你们的源业务系统库，都是啥数据库啊，mysql还是oracle或者其它mongodb，redis，hbase啥的 【冒泡】K 2019/1/15 10:23:30 混杂，Ora、GP、TD都有 【活跃】G 2019/1/15 10:24:32 你讲的是源库到ods当天任务没成功，第二天跑就丢掉了历史变更？ 【冒泡】K 2019/1/15 10:27:23 对 【潜水】A 2019/1/15 10:28:02 源是oracle @ 对，第二天源业务库数据就变了，已经无法从源库取到前一天的数据了 【活跃】C 2019/1/15 10:42:11 你举个场景，看看大家有什么想法，我们很多时候中间状态可以不要 【潜水】A 10:55:19 比如由于源库的表结构变了，没有同步修改仓库；源库有异常的数据加载到仓库出错了；或者源库数据量太大数据加载时候出错了。就是一些比较异常的情况，可能有的也不会发生，就是怕一旦发生什么想象不到的情况，导致某些表的数据没有加载过来，还没有在当天及时处理。 【话唠】B 10:58:53 你们数仓也是基于hive的吗 【话唠】B 11:00:55 我们这边权限控制严格，普通用户没有删表，删字段权限。如果源库做变更了增加字段了，必须发邮件，看看上下游是否有影响，再做同步变更。 【话唠】B 11:02:42 etl报错是难免的，及时的预警，处理，因为各种问题，可以维护个问题集，后边的人报错了，也可以查看。 【潜水】J 11:04:05 源系统变更一般都会做影响分析的吧 【潜水】A 11:18:22 对 是基于hive的 源库的变化都会做影响分析 主要是考虑一些预想外的情况或者疏漏之类的 【潜水】A 11:23:10 非常感谢上面几位的分享建议，我都参考一下想一想
原作者：Bane Radulovic 译者： 魏兴华 审核： 魏兴华 ASM file number 5 本章讲述ASM的5号文件，5号文件是ASM的模板目录，包含了磁盘组中所有的文件模板的信息。 有两种类型的模板：一种是系统自带的，一种是用户创建的，默认的模板（系统自带的）已经包含ASM的所有文件类型，创建文件时会根据文件类型自动匹配，用户创建的模板只会在用户特别指定时会使用。 每一个模板包含了如下的一些信息： ● 每个模板的名称（对于默认模板它的名称其实就是文件类型） ● 文件冗余度（默认是
很高兴《拨云见日，解密Oracle ASM内核》（点击链接可申领书籍哦~）一书终于和大家见面了，我是这本书的组织者和主要译者之一，同时也负责了所有文章的技术审校。这是DBGeeK社区翻译的第一本书籍，之所以选择这个话题作为社区第一本书，一方面是因为我本人对这一些列文章由衷的热爱，另一方面是因为对于Oracle ASM技术（产品）的系统性讲解的书籍，在市面上还没有，本书是真正意义上的系统讲解ASM原理，同时暴露了大量ASM内核细节的第一本书籍。
墨天轮社区的每日一题(https://www.modb.pro/test)，可以说是个小而精的专栏，利用碎片时间，就可以学习知识，非常推荐。
为什么SQL存在性能问题？我们通过10053，可以看到经过Oracle转换的SQL如下所示，
在Oracle中，一般使用 integer、 int或者 number(N)，MySQL 也支持 integer 和 int，但不支持 number 或 number(N) 的类型。
首先使用SHUTDOWN NORMAL方式关闭数据库，在数据库未关闭时CTRL+Z停止执行，退出用SQLPLUS重登陆，出现报错：ORA-01012: not logged on 实验如下： 首先执行 SYS@bys1>shutdown ORA-01013: user requested cancel of current operation [oracle@bys001 ~]$ sqlplus / as sysdba SQL*Plus: Release 11.2.0.1.0 Product
王菲离婚是《因为爱情》？汪峰离婚是想要《飞的更高》？遵循这个逻辑，谢霆锋离婚是因为《非走不可》？李宗盛离婚是因为《鬼迷心窍》？庾澄庆离婚是因为《情非得已》？吴奇隆离婚是因为《祝你一路顺风》？郑中基离婚是因为《你的眼睛背叛了你的心》？周杰伦这多年不结婚是因为菊花残？ 那么王文京的离婚则是因为有第三次婚姻在等待。 最近发生在管理软件业中的爱情故事不在少数，除了用友总裁王文京的第三次婚姻被爆光外，SAP和甲骨文多年的婚姻作关系也开始出现了裂痕。SAP和甲骨文在业界一直是一对欢喜冤家，双方一直存在竞合关系，虽然在E
HR产品在国内的发展也有一段不短的历史，从最初的HR到后来的HCM、e-HR，如今又迎来移动时代的M-HR，国产产品经历了传统模块儿到移动互联网的彻底洗礼。在产品上从简单到复杂，又回归到简单的过程，不断对国内市场的HR产品进行锤炼。加上国外产品转型更替进程加剧，国内产品迟滞的弱点不断暴露，国内厂商在巩固原有市场的同时，还必须迎合新技术、新理念的冲击，产品的更替不再是简单的模块升级，整个产品设计结构和理念的推陈出新更加重要。 数据表明，国产HR产品与国外Oracle的差距非常巨大，可以说国内HR产品在整体上已
6月5日在“国产数据库硬核技术沙龙-TDSQL-A技术揭秘”系列分享中，5位腾讯云技术大咖分别从整体技术架构、列式存储及相关执行优化、集群数据交互总线、Fragment执行框架/查询分片策略/子查询框架以及向量化执行引擎等多个方面对TDSQL-A进行了深入解读。 其中腾讯云数据库高级工程师-陈再妮，对于“TDSQL-A海量数据交互之道及企业级数据库能力”，进行议题分享。没有观看直播的小伙伴，可不要错过本次分享内容的文字实录。 以下内容为现场分享实录： TDSQL-A 是腾讯基于开源数据库PG自主研发的分
昨天自己在OEL上准备把10g,11g的环境都准备一下，我规划了一下硬盘空间，然后创建了相应的用户，12c的Oms也在这次的范围之内。 drwx------ 4 oms10g dba 4096 Jan 18 20:56 oms10g drwx------ 3 oms11g dba 4096 Jan 15 07:04 oms11g drwx------ 15 oms12c dba 4096 Jan 18 19:33 oms12c drwx------ 17 ora10g d
由于云计算技术已向专业领域发展，除了使用虚拟软件化Hypervisor技术实现基础设施云化外，基于容器的虚拟化技术在操作系统、数据库平台云化等领域也得到了很大的发展与应用。数据库即服务 (DBaaS)也在这样的技术背景下应运而生。
可以看到“ALLEN”和“SMITH”这两个人的数据重复了，现在要求表中name重复的数据只保留一行，其他的删除。
如题，SQL查询和删除重复值,例子是在Oracle环境下，类似写法网上很多。 1、利用distinct关键字去重 2、利用group by分组去重（这里没有实验出来就不写了） 3、利用rowid查询去重（个人推荐这个，rowid查询速度是最快的）
二.在创建之前，先介绍一下oracle数据库管理文件的方式。oracle数据库创建其实就
Oracle下select语句每个结果集中都有一个伪字段（伪列）rownum存在。 rownum用来标识每条记录的行号，行号从1开始，每次递增1。 rownum是虚拟的顺序值，前提是先排序
Oracle11g的安装教程 同时解压缩两个zip文件，生成一个database文件夹，进入到database文件夹，点击setup 这里写图片描述 去掉安全更新的选项，直接下一步 这里写图片描述 选
网上也有人遇到类型的，具体原因是，加distinct关键字的时候，排序的字段也要查出来，所以SQL要改成如下，将a.order_num字段也查出来
结果还是可以正常显示的，但是每一天的空号数量之和要大于总的非重复空号数，我开始怀疑哪里出错了。
根据研发提供的慢SQL,分析Oracle AWR中SQL，并没有发现相同的SQL.发现类似SQL,只是谓词条件不一样，咨询研发得知，前端根据登录人的角色不同，SQL写法也会变化，通常优化28原则，虽然这个功能用的少，但影响用户体验。
sqlplus / as sysdba startup sqlplus scott/tiger vi .bash_profile 容宽不够 set lines 200 set pages 200 确定数据量： select count(*) from emp; （1） select count(1) from emp; （2） 确定表结构 desc emp; 看两行 select empno,ename from emp; 可以进行数学运算 select empno,ename,sal
故障概述 某天晚上，我方收到行方请求协助分析某数据库两节点RAC数据库问题，问题描述如下： 该 数据库版本为11.2.0.3，该版本中ASM内存管理机制有所变化，导致ASM实例对共享内存的需求加大，由于该数据库ASM实例共享内存设置过小，导致ASM实例间歇性出现ORA-4031共享池无法分配连续内存空间。为解决该问题，行方决定调整ASM实例内存参数，而在首先修改节点2 ASM内存参数并重启节点2 grid集群过程中，发现节点1 grid集群状态异常，并且在重启节点2集群后，查看节点1 grid集群状态依然报
数据库升级并不难，只要遵循其步骤，一般问题不大。但是升级失败的情况也是屡见不鲜，尤其是生产数据库的升级，搞不定的时候甚至要创建SR。
原作者：Bane Radulovic 译者： 吴 栋 审核： 魏兴华 DBGeeK社群联合出品 Rebalancing act 在ASM中，每一个文件的extent都均匀的分布在它所在磁盘组的所有磁盘上，无论是在文件第一次创建或是文件创建之后的重新resize都是如此，这也意味着我们始终能保持磁盘组中的每一个磁盘上都有一个平衡的空间分配。 Rebalance operation 虽然文件在新建或是resize过程中都能保证空间的均匀分配，但是磁盘组在某些情况下会自动触发重平衡的操作，例如添
ROWNUMBER() OVER( PARTITION BY COL1 ORDER BY COL2)用法 今天在使用多字段去重时，由于某些字段有多种可能性，只需根据部分字段进行去重，在网上看到了rownumber() over(partition by col1 order by col2)去重的方法，很不错，在此记录分享下：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
