spark close()会导致缓存被自动清除吗？

文章/答案/技术大牛

发布

1回答

我知道spark.catalog.clearCache()用于显式地清除缓存。但我想知道，当我调用spark.close()时，它是否会自动清除Spark的缓存。期待回复，非常感谢您的帮助。

浏览 74提问于2021-03-30得票数 0

回答已采纳

2回答

获取响应后如何关闭http客户端连接？

、、、

我在客户端对象上搜索disconnect或close方法，但没有可用的方法。谢谢。

浏览 5提问于2018-01-19得票数 1

1回答

iOS -保存到库/缓存/会导致错误吗？

、、

如果应用程序开始将几乎无限的图像(按需)保存到/Library/缓存目录中以进行缓存，那么当存储空间满时会发生什么情况？保存到缓存文件夹会导致错误?如果应用程序是打开的，则或，iOS会自动清除打开应用程序的缓存吗?如果没有，则，是否由开发人员为开放应用程序启动此清除过程？或是否保证，无论清除是否发生，将图像保存到/Library/缓存

浏览 4提问于2015-05-31得票数 2

回答已采纳

1回答

什么是“包管理器缓存”(pacman，apt)？

、、

关于Linux包管理器，我有几个问题：我应该保存它还是彻底清理它是安全的？如果我清除缓存，我的包会自动更新吗？存储在这个缓存中的数据类型是什么？来自Arch linux的"pacman“ Debian的"apt“

浏览 0提问于2022-02-08得票数 0

回答已采纳

3回答

我试图在Spring应用程序的方法级别上使用Spring (@Cacheable注释)，但与其他google番石榴缓存不同，我不知道Spring是否会导致内存泄漏问题。我想它应该是内存，但是Spring本身会自动清除它吗？如果没有，当可能有数以百万计的请求进入应用程序时，这会引发内存泄漏问题吗？我的用例是，我每个请求都有一个很重的方法，而且我希望在当前请求期间只执行一次该方法，在请求完成后，不需要将数据保存在Cache中，但是如何确保在每个请求之后<e

浏览 12提问于2022-05-18得票数 0

2回答

Laravel 4清除所有过期的缓存

、、

在Laravel中，我们可以这样存储缓存：但这最终会导致越来越多的缓存文件被存储，即使在它过期之后也是如此。如果我们尝试使用php artisan cache:clear或Cache::flush();清理它，它将清除所有缓存，包括那些仍然有效的缓存。有没有可能让自动清理只清除过期的缓存？谢谢。

浏览 1提问于2013-11-21得票数 4

1回答

Docker build缓存是否自动清除？

我无法确定Docker的本地构建缓存是否被自动清除。如果它被清除了，多久一次？这是我们可以配置的东西吗？是否有年龄限制或总缓存大小限制？请注意，这个问题不是关于如何在构建镜像时绕过缓存，也不是如何手动清除缓存，也不是如何利用缓存机制来加速Docker构建。这些问题已经被广泛地记录下来了。这个问题的目的是了解Docker如何在内部管理其构建缓存。如果不手动

浏览 2提问于2019-11-20得票数 4

1回答

#[ apollo-cache-persist ]清除缓存数据| apollo-cache-persist错误|apollo-cache-persist不工作

、、、

这是我使用‘apollo3- cache - persistance’进行缓存持久化的代码，似乎在初始缓存之后自动清除了缓存的数据。清除会清除存储中用于持久化的所有内容。因此导致不能持久。

浏览 39提问于2020-12-30得票数 0

1回答

其中星火在洗牌前存储中间结果/分区

、

我认为spark会将分区溢出到磁盘中。在这种情况下，与缓存的代码有什么不同？args(0)).flatMap(_.split(' ')).map((_, 1)).cache() 即使我缓存了令牌化的rdd，shuffle还会继续洗牌吗？

浏览 2提问于2016-02-11得票数 2

2回答

清除插件卸载上的缓存

、、、

我的问题涉及这样一种情况，即插件实际上是_doing_it_right()，并使用wp_cache_*()函数在这些数据库表上缓存一些查询。当然，对于那些具有某种类型的持久缓存的站点来说，这主要是一个问题。(对于那些存储量相当大的数据来说，这种情况会更加严重，因

浏览 0提问于2016-07-04得票数 1

回答已采纳

1回答

在Unix中是否有传统的存储下载包的地方？

、

例如，我试图在OSX上安装Spark，并遵循这些指示。当我到达tar -xvzf spark-1.1.1.tar时，我想知道我是否真的应该在/Users/me/Downloads中这样做，这是下载的tar包自动存储自己的地方。这里真的是最好的存放包的地方吗，还是有一个传统的地方放置它们？我定期清除我的下载文件夹，所以我担心删除原始文件可能会导致问题。

浏览 0提问于2015-07-12得票数 1

1回答

Laravel Views Cache是如何工作的？

、、、、

根据Laravel的文档()，视图被编译成纯代码并缓存，直到它们被修改，但是什么时候重新编译它们呢？我的项目在生产环境中，当我部署更改时会自动显示，我不需要清除视图缓存或类似的东西。视图是否会自动重新编译(在这种情况下，什么时候会重新编译？)或者我没有启用缓存？

浏览 12提问于2016-08-29得票数 10

回答已采纳

1回答

映射多对一关系会导致MappingException。

、、

我有一个问题，在映射多对一的关系，我从来没有遇到过。当我试图生成数据库方案时，我得到的例外是：类，类不含猴子\Uploaderbundle\ entity \文件夹不是有效的实体或映射的超类。下面是我的映射文件：<?xml version="1.0" encoding="utf-8"?> <doc

浏览 3提问于2011-12-10得票数 0

2回答

phantomjs会定期自动清除缓存吗？

、

如果Phantomjs有这样的功能，我需要更改自动清除缓存的默认时间。有什么想法吗？

浏览 4提问于2015-03-05得票数 13

回答已采纳

2回答

iOS会自动清除缓存目录吗？

、、、

我在这个路径上保存媒体文件，我想知道iOS是自动清理缓存还是必须手动进行呢？

浏览 1提问于2019-02-18得票数 16

回答已采纳

1回答

spark在洗牌后会自动缓存rdds吗？

spark缓存会自动洗牌rdd吗？ .map(x => {

浏览 0提问于2020-10-19得票数 0

3回答

取消持久化(py)spark中的所有数据帧

、、、、

我是一个spark应用程序，有几个点我想要持久化当前状态。这通常是在一个大的步骤之后，或者缓存一个我想要多次使用的状态之后。似乎当我第二次对我的数据帧调用cache时，一个新的副本被缓存到内存中。在我的应用程序中，这会导致在扩展时出现内存问题。尽管在我当前的测试中，给定的数据帧最大大约为100MB，但中间结果的累积大小超出了executor上分配的内存。') df = (hive_contex

浏览 9提问于2016-04-28得票数 39

回答已采纳

1回答

为什么将的缓存计算为非缓存数据？

、

browser.getSettings().setAppCacheEnabled(true); 但是在我测试Android4.4设备(索尼Xperia )时，如果我转到Settings / Apps /我的应用程序名，缓存的文件将被计算在“设备上的数据”下，而不是“缓存”下。这是一个问题，因为(1)“清除数据”按钮也会清除cookie，因此不可能只清除此屏幕上的缓存；(2)如果系统没有将此缓存识别为" cache“，则可能

浏览 2提问于2018-06-20得票数 0

2回答

registerTempTable会导致表被缓存吗？

、

但是，当我将表注册为临时表时，我不知道表是否被缓存？如果我将查询转换为Scala函数(例如df.groupby().aggr().)，我也不知道它是否更具有性能。而不是将其作为sql语句使用。对此有什么帮助吗？

浏览 4提问于2016-11-07得票数 9

2回答

火花何时会自动清理缓存的RDDs？

、、、

使用scala终端的rdd.cache()方法缓存的RDD正在存储在内存中。这意味着它将消耗内存中的某些部分，这些部分可用于星火进程本身。话虽如此，如果ram被限制了，并且越来越多的RDDs已经被缓存，那么什么时候才能自动清除rdd缓存占用的内存呢？

浏览 4提问于2017-12-07得票数 3

回答已采纳

点击加载更多