1回答
流处理水印启发式算法
、、、、
在apache beam或spark streaming中的流处理中，水印估计的准确性如何。我的数据源是来自gcs/s3的文件，但我使用与每个事件关联的事件时间作为窗口函数的时间戳。任何关于这些流处理引擎如何计算启发式或估计值的想法，以及是否有方法来衡量这个估计值有多糟糕。
我的用例是，我有几个服务器在gcs/S3上产生事件日志，然后我以流的方式从我的流处理引擎读取这些文件。因此，可能会由于文件系统中断和故障或服务器在几个小时内无法
浏览 1提问于2018-01-25得票数 1
我已经建立了一个DAG来运行一个数据流作业。Dag很好地触发它，并且它成功地运行，但是输出文件没有出现在输出位置。输出位置是另一个项目中的一个桶，所使用的SA有权写入该桶.知道为什么文件没有生成吗？
浏览 2提问于2022-02-21得票数 0
我正在尝试使用aws-sdk的lambda函数将一些信息记录到我在aws watchlog中创建的日志流中，但即使当lambda被触发时，我也无法获得任何日志。
浏览 11提问于2019-05-08得票数 0
2回答
简单说一句：
可以捕获通过ServiceHost (自托管服务)托管的WCF服务的输出流吗？我的WCF服务中有一些方法可以输出有用的调试信息，是否可以将这些信息发送到主机的控制台输出？可以使用WCF服务类中的标准控制台输出命令输出到控制台。我已经标出了我认为最有用的答案。
浏览 2提问于2012-03-23得票数 2
回答已采纳
2回答
我有一个web服务器，在那里其他站点重定向到一些GET参数。我的处境：
我应该使用哪种技术来查询/过滤数据？以前，我在一台ubuntu机器上下载文件，然后再下载grep来获得结果。
浏览 8提问于2016-07-29得票数 3
回答已采纳
1回答
我正在尝试连接到托管在AWS上的redis服务器。我使用我的私钥ssh到实例中，安装并运行服务器。现在，我想使用实例的公共dns和端口6379 (服务器在其上运行)访问服务器。
浏览 80提问于2020-12-17得票数 0
我已经运行了一个Fargate服务，可以使用AWS控制台查看它的Cloudwatch日志流(导航到该服务，然后单击它的Logs选项卡)。我正在查看的AWS文档，并看到您可以使用日志组名称和日志流名称访问日志。虽然我知道服务的日志组名称，但日志流名称是动态生成的。我发现
浏览 0提问于2018-05-17得票数 9
回答已采纳
1回答
我有一个服务器，它有很多进程在运行时编写日志文件。我需要使客户端主机以近乎实时的方式获得服务器端日志文件的副本。有比简单地把尾巴和netcat结合起来更好的方法吗？我正在考虑在服务器端使用to和netcat一起通过一个连接来流多个日志文件：当客户端解复用日志并将它们写入文件时：其中，解复用器只是围绕sed构建，从<e
浏览 0提问于2015-11-29得票数 1
此外，我希望该程序记录的所有日志消息都可以在另一台计算机上使用。一个加号是如果我可以过滤/接收特定类型的消息，例如仅调试消息/错误消息。 这个是可能的吗？
浏览 1提问于2012-08-31得票数 0
回答已采纳
6回答
我目前正在创建一个安装程序，其中通过源启动的事件转发将Windows 2008配置为Windows XP和Windows 7客户端的中央日志实例。所有的计算机都在同一个域中。我根据这篇DevCenter文章配置了所有内容，但由于日志配置所提供的xml存在问题，我只是创建了一个新的扩展(源启动的)，放入“域计算机”组，并简单地将所有事件添加到其中。但是，在计算日志服务器上的日志时，安全日志流中的所有事件都不会转发到中央
浏览 0提问于2012-02-03得票数 6
回答已采纳
我试图在log stream上查看日志，但无法看到任何类似于我们在控制台上看到的内容。 ? 有什么设置吗？
浏览 44提问于2020-10-22得票数 0
回答已采纳
问题是，当我使用具有特定日志记录级别的记录器时，AppService中的“日志流”总是显示具有“信息”级别的所有日志。LogError() this.Logger.LogError("Simple error"); }但“日志流附言:所有的应用程序日志配置都是开箱即用的。
浏览 1提问于2021-09-02得票数 0
我想获取流经我的AWS传输网关的流量的流日志。亚马逊网络服务Documentation说：“你可以使用亚马逊私有网络流量日志与亚马逊网络服务传输网关来捕获有关通过亚马逊网络服务传输网关附件的IP流量的信息”，但我在传输网关附件配置页面中找不到用于创建流日志的配置我可以从转接网关连接的VPC创建流日志，但这并不是很方便，特别是因为这些VPC在其他团队管理的帐户中。如何为转接网关附件创建流日志<
浏览 17提问于2019-01-19得票数 3
回答已采纳
当一个新文件“emp.json”被添加到S3桶中的“sourcebucket/test”文件夹中时，就会在cloudwatch日志中创建一个新的日志流，并将该文件添加到“塔吉特桶/emp”folder.This当我在5分钟前将另一个文件“emp1.json”添加到S3桶中的“sourcebucket/test”文件夹中时，相同的日志流将被添加到日志中，并在将日志附加到现有日志流中的“targetbucke
浏览 1提问于2020-06-11得票数 0
1回答
是否可以使用storm将日志数据吞并到Hadoop集群中？
两者都是用来传输数据的，所以风暴可以作为水槽的替代品吗？
浏览 0提问于2017-11-03得票数 6
回答已采纳
我读了很多关于lambda和kappa架构的文章，在这些架构中，我们需要使用Apache Spark或Apache Storm。我刚刚发现了一个名为DataTorrent的新工具，它可以进行批处理和实时处理。我想知道DataTorrent是否可以同时做lambda (或kappa)架构的批处理层和速度层？
浏览 38提问于2016-07-20得票数 1
回答已采纳
我认为可以使用Serverless添加多个日志组。来自的例子。有任何方法可以使用像/aws/lambda/*这样的所有日志组定义吗？
我已经使用aws/lambda名称空间的度量过滤器和Errors度量设置了一个云监视警报。我希望这将是一样容易选择-所有的日志组以同样的方式。
浏览 5提问于2022-08-10得票数 0
1回答
摘要:我注意到其中一台远程计算机无法连接到这个自托管的WCF服务。背景:我有一个名为"Dispatcher服务“的windows服务，该服务是一些WCF服务的自托管服务，如”工作流日志服务“、”警报服务“和”工作流客户端服务“。我有另一个名为“客户端服务”的窗口服务，它使用这些自托管的WCF服务。此w
浏览 0提问于2019-01-22得票数 0
我已经有一个ECS集群服务运行在一个任务中，并且可以使用AWS控制台查看它的Cloudwatch日志流。如何设置awslogs-stream-prefix的日期，因为我希望按日期逐个日期识别日志流。
浏览 4提问于2020-05-06得票数 3
回答已采纳
我正在尝试为Oracle上的SAP ECC创建Attunity端点。从Attunity文档来看，这似乎是一个分两步的过程。我知道，一旦您能够访问DB，就可以检索数据。那么在这种情况下，为什么需要第二步呢？由于我还没有在组织中访问Oracle，所以我还无法尝试它(面临其他一些问题)。但他想知道同样的逻辑是什么。我在谷歌上找不到相关的文章，所以认为如果有人尝试过做同样的事情
浏览 3提问于2020-10-13得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
