非常大的时间戳
是指一个非常大的数字，用于表示一个特定时间点的标识。时间戳通常是一个整数，表示从某个固定的起始时间点（通常是1970年1月1日00:00:00 UTC）到特定时间点的秒数或毫秒数。
在云计算领域，非常大的时间戳常用于记录事件发生的时间，以便进行时间排序、数据分析、日志记录等操作。它可以用于跟踪和比较事件的发生顺序，以及计算事件之间的时间间隔。
非常大的时间戳的优势在于它的唯一性和精确性。由于时间戳是一个递增的数字，不同的时间点对应不同的时间戳，因此可以确保每个事件都有一个唯一的标识。同时，时间戳的精确性可以达到秒级或毫秒级，可以满足大部分应用场景的需求。
在实际应用中，非常大的时间戳可以应用于各种场景，例如：
- 日志记录：在系统日志中，使用时间戳可以记录每个事件发生的时间，以便后续的故障排查和分析。
- 数据库操作：在数据库中，使用时间戳可以记录数据的创建时间、修改时间等信息，方便进行数据的查询和排序。
- 分布式系统：在分布式系统中，使用时间戳可以协调不同节点之间的事件顺序，保证数据的一致性和可靠性。
- 数据同步：在数据同步和备份过程中，使用时间戳可以确定需要同步的数据范围，避免重复同步和丢失数据。
腾讯云提供了一系列与时间相关的产品和服务，例如：
- 云服务器（CVM）：腾讯云的云服务器可以通过获取系统时间来生成时间戳，并提供高性能的计算资源。
- 云数据库（CDB）：腾讯云的云数据库支持时间戳字段的存储和查询，方便进行数据的时间相关操作。
- 云日志服务（CLS）：腾讯云的云日志服务可以帮助用户记录和分析大规模的日志数据，包括时间戳的记录和查询功能。
更多关于腾讯云产品和服务的信息，可以访问腾讯云官方网站：https://cloud.tencent.com/
相关·内容
1回答
如果您有一个非常非常大的数据库，那么在时间戳字段中搜索某个时间戳间隔是否很快？
创建有时间间隔的表是否有意义，您可以在主表上记录在特定时间范围内(例如每个时间段一天)完成的所有事物的it……然后你可以在这些表上搜索，比如2天，它会给出这些时间段内主表上所有东西的ID和时间戳…然后把它们从主表中拉出来？
这有什么意义吗？
浏览 0提问于2011-06-07得票数 0
回答已采纳
1回答
我有一个表，在BigQuery中有一个列时间戳类型。当我在我的控制台上显示它时，我可以看到时间戳如下: 2015-10-19 21:25:35
然后，我使用BigQuery API查询我的表，当我显示查询的结果时，我注意到这个时间戳已经转换成某种非常大的整数，比如1.445289935E9的字符串格式。
你知道我怎么把它转换回正常时间吗？我能用在红宝石密码里的东西吗？
浏览 2提问于2016-07-17得票数 2
回答已采纳
我想知道在表中比较时间戳值以获得新更新/插入的行是否安全。(例如)。
在一个非常大/频繁更新的数据库中，如果时间戳达到二进制(8)的最大值，会发生什么？
浏览 0提问于2013-07-10得票数 10
回答已采纳
我们有一个对象集合，每个对象都有一个整数ID和一个时间戳。我们希望能够搜索重复项并根据ID更新集合。
但我们也希望能够获取集合的“切片”，例如，在给定时间之后找到每个具有时间戳的对象。因此，我们还希望对时间戳进行排序。
我们使用的是TreeMap，一开始它似乎给了我们想要的东西。但是，因为TreeMap (以及从SortedSet派生的所有内容)只使用compareTo()而忽略equals()方法，所以我们发现根据ID搜索重复项是不起作用的。我们的compareTo()方法试图同时满足这两个条件(根据ID或时间戳进行搜索)，但最终会变得又大又难看，实际上并不起作用。:)
这个集合可能会变得非
浏览 1提问于2011-09-07得票数 1
回答已采纳
用例:基于时间戳从非常大的DynamoDb表中清除旧的遥测数据，该时间戳比90天还要老
日期大小: 750 GB (爱尔兰+俄亥俄+北京)
项目计数:5亿条记录
样本数据：
{
"deviceid": "a00a940c-b804-4806-a14f-7c713964fc65",
"timestamp": 1661521317,
"notifications": false,
"payload": [
{
"n": "temprat
浏览 8提问于2022-09-21得票数 0
2回答
我得到了一个带有时间戳的JSON文件。
其中之一是：1545880457898
我能够通过to：new Date(ticket.creationTime).toLocaleString()获得实际日期，它给了我：27/12/2018, 04:14:17。
现在，我尝试通过got：27/12/2018和got：1548543600000来转换date：1548543600000。
这是非常不同的，特别是非常大。这是个很大的问题，因为我正在比较它们，以便根据创建时间对它们进行排序。
谁知道他们为什么会有分歧？我如何才能得到相当于case1的信息呢？
浏览 1提问于2021-03-07得票数 0
回答已采纳
我有一个相当大的时间序列(500M样本)，具有不规则的时间戳。 特别是，有时样本的间隔非常紧密(ms)，然后间隔非常大(几天没有样本)。 我经常使用C++实用程序将整个系列从Influx中提取出来进行处理。 如果我试图一次拉取整个序列，它太大了，查询冻结或失败。 因此，我以“块”的形式检索它，其中一个块的时间跨度约为30mn。 我有一个获取序列的开始和结束时间戳的查询。 然后，我将总时间跨度分成30mn个块，并为每个块发送样本检索查询。 问题:对于某些跨度，没有数据，并且我浪费了大量时间来查询涌入以获得空响应。 因此我的问题是:给定一个查询返回的有效样本并给出它的时间戳，有没有一种方法可以查
浏览 36提问于2021-10-29得票数 0
我正在创建一个WordPress插件，可以看到在某些服务器上，对于某些文件， (或)返回无效的mtime值。在某些情况下，它是一个负值或一个非常大的价值(超过30亿)。
在FTP中，我可以看到时间戳是正确的。
浏览 3提问于2012-12-13得票数 11
我必须从数据库中检索自上次执行以来添加的所有记录，这应该每天都会发生。
唯一能从其他记录中识别这些记录的是Unix时间戳(以毫秒为单位)或时间(hhmmss)和日期(yyyyMMdd)。我的问题是所有这些列都是varchar类型的。
数据库非常大，而且只会越来越大。是否有任何方法只获得具有大于X的Unix时间戳的行，而不必加载整个事件并解析时间戳？
我现在要做的是：
var sales = context.SALES.Select(s =>
new Sale {
Product = s.SC_PRDCT,
Terminal = s.SC_TERM,
Operat
浏览 1提问于2019-11-28得票数 1
回答已采纳
我有日期范围(两个UNIX时间戳)，如果存在的话，我需要在23:59:59找到点。我怎样才能用Perl做到这一点呢？
另外，我认为for()不是一个好主意，因为我可以有非常大的范围。还有别的变种吗？
浏览 0提问于2010-12-14得票数 2
回答已采纳
我试着用这样的代码。
SELECT now () + interval '50000000000s'
这是一个问题，因为秒数对于间隔来说太大了。根据PostgreSQL联机文档，间隔是一个16字节的数字，但只有在实际用作表中的列时才是如此。
我尝试过将两个时间戳相加，但是操作符+根本不存在于两个时间戳上(不过，-存在)。
是否有其他方法可以将非常大的间隔(或秒数)添加到现有时间戳中(存储在表或now()中)。
PS:转换为UNIX时间戳，添加秒数并将其转换回PostgreSQL的时间戳可能会有效，但我正在寻找更直接的解决方案。
浏览 1提问于2014-10-14得票数 2
回答已采纳
我已经开发了一个informatica流，它基本上可以从Server读取一个非常大的表(比如大约1.2亿到3亿条记录)，并将其加载到另一个数据库中。过滤条件将是一个datetime2字段(当记录被插入到表中时)。
在阅读之前和之后，我将在这个时间戳字段上创建和删除一个非聚集索引。由于时间不够，我实际上无法进行性能测试。
您认为在非聚集索引就位后，基于时间戳字段的筛选是可以的吗？我的意思是关于演出会怎么样的一个非常粗略的想法？我不想让演出受到太严重的打击！
浏览 0提问于2018-03-23得票数 1
回答已采纳
我目前有一个非常大的日志文件，其中的代码行如下所示
2013-10-08 22:58:38 [INFO] [more info] Description or command
我想知道如何在这一点上分割它
2013-10-08 22:58:38 | [INFO] [more info] Description or command
就在约会之后，这样我就可以把它们换成不同的风格
<div class="console-line"><span class="Datetime">2013-10-08 22:58:38</span>
浏览 1提问于2013-10-20得票数 0
我有一个庞大的桑巴共享列表，格式如下
\\10.1.5.3\Share1
\\10.1.5.3\Share2
\\10.1.5.4\Share3
\\10.1.5.3\Share4
... thousands more of these ...
我已经通过遍历每个文件夹的文件树来索引这些文件夹的内容。需要很长时间，但没有问题。
现在，如果文件自第一个索引以来发生了更改，我希望定期地重新索引这些文件夹。因此，自然地，我再次使用时间戳遍历每个samba共享目录的文件树，以了解自上次索引以来文件是否发生了变化。
这需要很长时间，因为文件夹中的时间戳非常大的文件夹/文件数量太多。有更快的方法吗？人们
浏览 0提问于2016-12-06得票数 0
我正在尝试计算用户在我的应用程序上花费的总时间。我们在BigQuery中集成了firebase分析数据。我可以在查询的select语句中对engagement_time_msec的值使用sum吗？这就是我正在尝试的：
SELECT SUM(x.value.int_value)
FROM "[dataset]",
UNNEST(event_params) AS x WHERE x.key = "engagement_time_msec"
在执行这个查询之后，我得到了非常大的值。我不确定是否可以使用SUM("engagement_time_msec"
浏览 0提问于2018-10-11得票数 3
我想用Unix时间戳值创建一个MyISAM日志表。在使用"from“date to "to”date时，我每隔一次就会有各种SELECT语句，并且表会变得非常大。
我不知道在索引INT和索引TIMESTAMP之间哪一个会更快(我相信它们有相同的存储空间)。
我已经在Stackoverflow上查过了，但是答案有点模糊，要么是新成员的回答，要么是他们说的一个或另一个。
浏览 0提问于2013-07-23得票数 4
回答已采纳
3回答
由于需要在两个服务器之间移动几个非常大的文件(VHD)，我在远程桌面会话中使用Windows Explorer启动了文件复制操作，然后在没有注销的情况下关闭了会话，使文件副本正常工作；第二天，我登录回站，文件副本似乎已经完成.但是文件上的所有时间戳(创建的、上次访问的、最后修改的)都是指我启动副本的时间，而且我肯定知道复制操作需要几个小时。
至少我希望“最后一次访问”或“最后修改”时间戳会引用文件复制操作结束的实际时间，但看起来这不是它的工作方式。
如何检查(如果可以的话)副本是否成功完成，以及何时完成？
文件大小不是指示符，因为文件总是被分配到完整大小，即使复制操作被中断。
浏览 0提问于2012-03-31得票数 8
回答已采纳
1回答
我有一个非常大的MySQL表(数百万行)，它每隔20分钟就会获得一次新数据。一开始我犯了一个错误，我有一个时间戳数据，而我真正想要的是一个日期时间列。如何才能尽可能快地将当前表eidt或迁移到新表，同时仍然能够将新数据追加到旧表或新表？
浏览 0提问于2012-05-25得票数 0
回答已采纳
1回答
在我的项目中，我使用的是谷歌BigQuery，它保存了大量的数据。BigQuery列是：
account_id，session_id，transaction_id，用户名，事件，时间戳。
在我的仪表板中，我根据时间戳(最后30天)获取整个数据。因为我有非常大的数据，所以性能非常慢(获取最后30天的数据需要13秒)。
最近，我试图查看Google BigTable，我发现他们可以根据时间获取数据。在我的测试中，BigTable的性能比BigQuery慢。是否有任何建议的模式可以提高BigTable的性能？
这是BigTable中我的模式的示例：
const row = {
key:
浏览 3提问于2022-05-25得票数 0
13回答
我有一个非常大的excel电子表格，其中有一列时间戳。有没有人知道把它转换成日期？有没有可以使用的函数？我试过格式化单元格日期，但这不起作用。我的文件是91,568 KB。如果有更简单的方法来实现这一点，那就太好了。我乐于接受各种想法。
提前感谢您:)
附言:我不懂任何编程语言
浏览 2提问于2013-04-18得票数 53
回答已采纳
我正在尝试获取用户拥有的总点数，以及本月的点数。当用户获得一个点数时，它被登录到带有时间戳的点数表中。Totals忽略时间戳，而当月的点数查找具有正确时间戳的点(从该月的第一天开始)。
SELECT user_id, user_name, sum(tpoints.point_points) as total_points, sum(mpoints.point_points) as month_points
FROM users
LEFT JOIN points tpoints
ON users.user_id = tpoints.point_userid
LEFT JOIN points
浏览 1提问于2009-03-04得票数 0
回答已采纳
3回答
数据库表重复准则
、、、
我有一个恒定的数据流量。所有数据必须用时间戳存储到数据库中。数据间隔为5分钟，使用伪SQL代码在同一时间间隔内选择最新数据：
SELECT * FROM TB_TABLE WHERE TIMESTAMP = MAX(TIMESTAMP)
由于这个表变得非常大(千兆字节)，我在两个表中进行了过早的优化:一个用于所有数据(仅用于插入)，另一个用于最新数据(用于插入、删除和选择)。
我想知道这种复制是否是一件好事，因为我没有任何指标可以证明它提高了我的应用程序性能。作为一般的指导方针，你能推荐我所做的吗？
更新 BTW i使用MS 2005和.NET C# Linq-To-Sql
浏览 3提问于2009-04-24得票数 1
回答已采纳
我正在使用PySpark，几乎要放弃我的问题了。我有两个数据集:一个非常大的(集合A)和一个相当小的(集合B)。它们的形式如下： Data set A:
variable | timestampA
---------------------------------
x | 2015-01-01 09:29:21
y | 2015-01-01 12:01:57
Data set B:
different information | timestampB
-------------------------------------------
info
浏览 10提问于2020-10-08得票数 1
回答已采纳
2回答
我有一个简单的连接，它工作得很好，但速度非常慢，我认为是因为技术表非常大。有许多uid的实例，因为它跟踪uid的时间戳，因此是不同的。提高查询速度的最好方法是什么？
SELECT DISTINCT tech.uid,
listing.empno,
listing.firstname,
listing.lastname
FROM tech,
listing
WHERE tech.uid = listing.empno
ORDER BY listing.empno A
浏览 0提问于2013-03-01得票数 1
回答已采纳
我正在为机器人球sphero写一个游戏(他们的论坛有问题，似乎不能问问题)。我正在尝试为两个或更多的玩家进行球对球碰撞检测。
首先，他们在这里提供了一个示例：
他们提供的阈值太敏感了，在木地板上它总是会触发。暂时忘记这一点，我必须使用来自两个设备的影响时间戳来查看它们是否在大致相同的时间触发了冲突。
我的问题是，当减去时间戳时，在某些情况下，我得到的变化非常大，我认为差异从一开始就相当长。我存储了几个时间戳，这样我就不会错过正确的时间戳，我尝试使用死区时间，看看降低它是否会有所帮助。
最常见的是减去2 NSTimeIntervals，我得到的结果是0.68和0.72之间的差值(我预计会有0.0
浏览 7提问于2013-03-06得票数 3
回答已采纳
我现在有个问题。我有一个数据库表，它每隔几分钟就会填充一次，其中包含基于患者护理的数据行。其中一列是名为'AdmissionTime‘的DATETIME (时间戳)字段，它显示数据被捕获的时间。此信息是基于逐个患者的，因此表变得非常大。Patients由patientID field....so确定很容易对每个患者进行过滤
不过，我想要做的只是显示由患者活动创建的第一个时间戳中的前24小时数据。此数据可能收集了4天或5天，但我只需要前24小时的数据
例如：
Patient is admitted - first timestamp captured at Jan 01, 2013 7:
浏览 1提问于2013-02-05得票数 1
2回答
我有一个表，其中包含事件以及Unix时间戳：
event_id | start_time | end_time
----------------------------------
1 | 1485388800 | 1485410400
2 | 1485396000 | 1485403200
3 | 1485406800 | 1485414000
我想写一个查询，它接受开始时间和结束时间，并告诉我在每个小时内发生了多少事件。在给定开始时间1485385200和结束时间1485414000的情况下，上表的结果为：
event_count | time
-
浏览 15提问于2017-01-26得票数 1
在尝试使用Excel作为数据框架从Excel中获取行时，会出现以下错误。有些列的值非常大，如1405668170987000000，而另一些列则是时间戳列，其值类似于11:46:00.180630。
我确实将上述列的格式转换为文本。但是，对于一个简单的select语句(select * from df limit 5)，我仍然得到以下错误：
溢出错误: Python太大，无法转换为SQLite整数
浏览 2提问于2020-06-03得票数 0
2回答
我现在正在实现以下特性:假设我在mongodb中有一个集合，包含数百万个条目(非常大，比如100米)，每个条目都是类型的
{"uniqId", "properties"}
例如：
{"uniqId" : "u1" , "properties" : ["p1", "p2"]}
我有一个运行时组件，它应该通过uniqId读取数据，还有一些批处理过程应该将数据插入到这个集合中。有大量的阅读和非常罕见的更新(一周一次)。
问题是，我将始终得到我应该插入的完整文件(这可能是非常大的一行)。
浏览 0提问于2012-03-01得票数 4
3回答
我有一个大的CSV文件，其中有许多列，还有一个Timestamp列。该文件按时间戳的升序排序。
我想把这些值读入熊猫的数据中，但只在特定的时间戳范围内，比如某一特定日期的下午4:00到5:00。
做这件事最有效的方法是什么？这个文件非常大，我想要避免完全地浏览它，因为它是排序的，我希望它在到达上面的时间戳时被切断，同时也希望避免由,手动拆分，有什么方法可以使用熊猫read_csv函数来实现呢？
import pandas as pd
df = pd.read_csv('csvfile', header='infer', ???)
浏览 1提问于2017-05-30得票数 1
回答已采纳
我在我的应用程序中的某个地方出现了一个StackOverFlow，我正在设法找到跟踪它的方法。
我的事件日志每天都会显示一次崩溃，其中包含以下信息：
错误应用程序名称: MyApp.exe，版本: 1.0.0.0，时间戳: 0x522e8317
故障模块名称: clr.dll，版本: 4.0.30319.18047，时间戳: 0x515530ce
异常代码: 0xc00000fd
断层偏移量: 0x000000000000c657
故障过程id: 0x117fc
故障应用程序启动时间: 0x01ceadf607b184d2
故障应用程序路径: C:\Users\Administrator\D
浏览 3提问于2013-09-10得票数 25
回答已采纳
当我需要将维表加载到kafka时，我会有这种情况。突出是因为我想通过kafka公开我所有的应用程序数据，这是公司所有部门/产品的常见方式。 但我的维度只有在snaphsot时才是正确的，不可能以增量模式处理它们。因为Kafka Stream我添加了“batch_id”(加载操作的时间戳)。我知道这是黑客，但它的工作对我来说很好，因为我只想要流非常非常大的事实表，也不想有两种不同的方式来暴露数据。因此，我有能力通过"bacth_id“将我维度处理为逻辑窗口流。 但现在我需要按时间间隔加载尺寸(例如30秒)。我的维度添加/更新/删除率非常低。某些维度不会更新为四元组。 所以我的问题是，有
浏览 12提问于2019-01-30得票数 0
回答已采纳
2回答
我们有许多文本文件需要并行阅读。这些都是用星火流作业创建的，但这是一个很长的故事。定期需要进行批处理计算，因此我们创建了一个逗号分隔的文件列表，以传递给sparkContext.textFile(fileList)。列表可能会变得非常大(可能是10000)，并且都在hdfs上。
问题是:最有表现力的阅读方式是什么？
我们想到的可能性：
我们是否应该像现在这样把长长的名单交出来呢？这似乎很慢，因为数据本身并没有那么大。
是否应该将列表分成几个组，并附加相应的RDD？
我们是否应该移动并追加文本以获得一个有较少大文本文件的dir？这将是一件麻烦的事情，因为数据是用时间戳分隔成dirs的
浏览 1提问于2015-03-14得票数 1
1回答
我在一个Android应用程序中使用MediaCodec对来自Usb摄像头的帧进行编码，然后将原始流传输到mp4parser以创建mp4(API级别为16)。
在许多设备上，一切都运行得很好，但我对Galaxy S3 (I9300)有一些问题。
问题是，当我向编码器发送帧1分钟时，有时我会从编码器获得非常大的输出。
大小范围在2.5MB-20MB之间。这个问题在较长的剪辑上会变得更糟，例如，7分钟范围是9MB-120MB。
这正常吗？
我试图捕捉相同的场景，但仍然得到了不同的结果。
编码器设置：
Codec: OMX.SEC.AVC.Encoder
Color Format: 21
KEY_F
浏览 0提问于2015-12-21得票数 0
4回答
我有一个带有时间戳和值V的非常大的表，其中一些V可能为空：
timestamp,V
sometime_1,value1
sometime_2,value2
sometime_3,NULL
sometime_4,value4
我想要一个查询来选择给定时间戳T的值V，但是如果它是空的，请在T的任何一边的最接近T的时间给我值--例如，如果我有
2010-09-01 00:00:01,v1
2010-09-01 00:00:02,v2
2010-09-01 00:00:03,NULL
2010-09-01 00:00:04,NULL
2010-09-01 00:00:05,v3
我希望时间戳"
浏览 9提问于2014-10-18得票数 2
回答已采纳
我正在DynamoDB中设计一个表，它将包含大量记录，每个记录都有一个唯一的ID和一个时间戳。无论其他属性值如何，我都需要检索介于两个日期之间的一组记录。
为时间戳字段添加全局辅助索引似乎是一种逻辑解决方案，但这并不简单。
DynamoDB中的查询命令需要一个KeyConditionExpression参数，该参数确定查询返回的结果。来自
若要指定搜索条件，请使用键条件表达式--一个确定要从表或索引中读取的项的字符串。必须将分区键名称和值指定为相等条件。您可以为排序键(如果存在)提供第二个条件。
由于分区键必须精确指定，因此不能用于查询范围的值。可以为排序键指定范围，但仅限于分区键上的
浏览 4提问于2021-08-31得票数 1
回答已采纳
我所要求的应该是非常简单的，但是德鲁伊的文档对此知之甚少。
我正在进行一个groupBy查询，并且数据非常大，因此我通过在每个后续查询上增加limitSpec.limit来对其进行“分页”。
默认情况下，返回的数组从开始时间戳开始并在时间上向前移动。我希望结果从结束时间戳开始，并在时间上从那里倒退。
有人知道怎么做吗？
因此，换句话说，默认情况下，groupBy查询将如下所示：
[
{
"version" : "v1",
"timestamp" : "2012-01-01T00:00:00.000Z",
浏览 2提问于2018-08-14得票数 0
1回答
我有一个很大的mySQL表，其中包含各种数据的值(所有数据都具有不同的data_id)和一个时间戳(unix时间戳，单位为ms)。我试图为所有这些数据构建一个(实时)绘图仪，我希望能够绘制垂直轴上的任何数据与水平轴上的任何其他数据。我遇到的问题是如何根据数据点的时间戳有效地耦合它们。 数据集非常大，记录频率约为10 Hz，我希望每1-5分钟有一个数据点。我已经设法进行了一次(有点)高效的SQL调用，以获得每1分钟的平均值和平均时间戳： SELECT AVG(value), AVG(timestamp)
FROM
(
(
SELECT va
浏览 10提问于2019-05-14得票数 0
1回答
嘿，伙计们，我有一个关于sql性能的快速问题。我有一个非常大的表，运行下面的查询需要花费很长时间，注意有一个带有时间戳的列。
select name,emails,
count(*) as cnt
from table
where date(timestamp) between '2016-01-20' and '2016-02-3'
and name is not null
group by 1,2;
因此，我的朋友建议使用以下查询：
select name,emails,
count(*) as cnt
from table
where ti
浏览 1提问于2016-02-04得票数 0
回答已采纳
1回答
在我们的应用程序中，我们使用了一些非常大的集合(>25万个文档)。应用程序必须脱机使用，因此需要将整个集合存储在客户端上。
网络一出现，两个包和就会同步整个集合。
本着节省带宽和为用户提供良好性能的精神，我正在寻找一种方法，以避免每次应用程序连接到服务器时都下载整个集合。
浏览 0提问于2014-05-02得票数 0
我认为这个问题的定义非常简单，但我正在寻找一种适合于非常大的数据集(20+数百万)的解决方案。
我有两个列表:包含N时间戳的stamps和包含N标量值的values。
我可以很容易地将这些数据绘制成时间序列图。
现在，我想要将values的平均值绘制到1分钟的长箱中(我通常每分钟有50个值，但碰巧有些值是空的)。导致空箱的空值应该使该箱的平均值等于零。
我如何用最少的代码高效地做到这一点呢？
浏览 0提问于2016-02-10得票数 0
我用时间戳作为记分。我想通过在得分中附加一个唯一的对象-id来防止重复。目前，这个id是一个6位数的数字(目前最高的id是221849)，但是它预计会增加超过一百万。因此，得分将类似于1407971846221849 (时间戳:1407971846 id:221849)，最终将达到14079718461000001 (时间戳:1407971846 id:1000001)。
我担心的是不能存储分数，因为它们已经达到了允许的最大值。
我读过，但我有点困惑。我知道，基本数学。但请原谅我，我想把这件事做好。
Redis排序集使用双64位浮点数来表示分数。在我们支持的所有体系结构中，这都表示为IEEE
浏览 0提问于2015-06-25得票数 4
2回答
我希望你能帮我解决这个问题。我目前正在重新设计一个应用程序(.NET)，现在我不得不过多地考虑数据存储了。
基本上每隔10秒左右(可能会有所不同，但这是最快的)，我就会得到一个新的数据集，其中包含一个浮点值数组和一个timeStamp。(这些数组可能非常大，所以我必须处理大量数据，可能高达数百mb甚至gb)每个过程的数组长度是固定的(让我们称之为run)，但在不同的运行中会有所不同。我一次只看一次运行。
所以我的问题是：
如何保存这些数据，以及如何在应用程序中处理这些数据？
尤其是如果我想要读出具有特定时间戳的数据集，
给定索引中的浮点值的列表
以及给定索引范围和时间戳范围的浮点值的2d列表。
浏览 1提问于2012-07-28得票数 0
2回答
我要确定一个在Azure表存储中存储日志信息的好策略。我有以下几点：
PartitionKey:日志的名称。
RowKey:倒置的DateTime蜱，
这里唯一的问题是分区可能变得非常大(数百万个实体)，并且随着时间的推移，分区的大小也会增加。
但话虽如此，正在执行的查询类型总是包括PartitionKey (无扫描)和RowKey过滤器(一次小扫描)。
例如(用自然语言)：
where `PartitionKey` = "MyApiLogs" and
where `RowKey` is between "01-01-15 12:00" and "
浏览 5提问于2015-02-19得票数 8
回答已采纳
背景
我有一个节点和基于反应的应用程序。我正在使用Firebase作为存储和数据库。在我的应用程序中，用户可以填写一张表格，上传图片，并选择将图片添加到其网站的时间。我将每个图像更新作为对象保存在我的Firebase数据库中，如下所示。图像按升序更新时间排列。
user-name: {
images: [
{
src: 'image-src-url',
updateTime: 1503953587727
}
{
src: 'image-src-url',
upda
浏览 1提问于2017-08-31得票数 0
回答已采纳
1回答
我有一个非常大的表，其中包含4列: 1)成员的status属性已更改为: online、offline、game_lobby、load_screen 2)成员的status属性已从: online、offline、game_lobby和load_screen更改3)成员的ID号和4) status属性更改的时间戳)。我想计算所有成员在线花费的平均时间，这将是状态从在线变为离线的时间戳与状态从离线变为在线的时间戳之间的差值：
使用上面链接的样本，计算出的平均值为(01/03/2016 15:32:05 - 01/02/2016 07:18:32 + 03/14/2016 05:46:41 - 0
浏览 2提问于2016-03-15得票数 0
4回答
表和ORDER？
、、、、
因此，我有一个无序表movement，其中包含timestamp、x和y列。我希望按timestamp进行排序，并更改和保存表，以便按时间戳对所有行进行排序。
我想使用UPDATE TABLE，但我不确定查询会是什么样子.例如，我有这样的想法：
UPDATE movement
SET ?????
ORDER BY timestamp;
我不想设置任何东西，我只想改变桌子的顺序。我需要为我将要编写的另一个查询执行此操作，但事实是，这个表非常大，我需要分步骤分解，以便以后的性能不会很糟糕。那我该怎么做？我找到了解决类似问题的所以post，但我想知道是否有其他方法来解决这个问题，而不是使用另一
浏览 8提问于2015-06-03得票数 3
回答已采纳
1回答
我正在用mysql设计一个表，它可以存储数千台设备，每台设备每10秒大约有数百条记录。此表旨在记录设备数据以供分析，某种历史数据库或时间序列数据库，但在事务数据库上。共6列: ID (主键)、Timestamp、TagID、DeviceID、Decimal Value、MessageID。我在索引时间戳，TagID，DeviceID，十进制值。当这个表在dba、select查询方面变得非常大时，我们会有什么潜在的问题吗？我们是否更好地每月创建新表以保持表的尺寸较小？我不是数据库专家，所以我不知道哪种方法更好。有没有人能提个建议。非常感谢。
浏览 0提问于2016-02-29得票数 0
我有一个大的行列家族，我试图运行一个地图减少作业对。CF是一个按时间顺序的事件集合，其中列名本质上是时间戳。我需要针对CF中的特定日期范围运行MR job。
当我将widerow属性设置为false运行作业时，预期的列片段将被传递到mapper类中。但是，当我将widerow设置为true时，将处理整个列族，而忽略了片谓词。
问题是，我必须使用广泛的支持，因为切片中的列数量可能会非常大，如果一次加载就会消耗所有的内存。
我已经找到了这个JIRA任务，它概述了这个问题，但由于“无法复制”而被关闭-
我运行cassandra 1.2.6，在我的jar中使用cassandra 1.2.4和hado
浏览 3提问于2013-07-31得票数 0
回答已采纳
2回答
我在hive中有两个表，每个表都由一个表示时间戳的字符串进行分区(我使用的是字符串而不是时间戳，因为我使用的是Cloudera Impala中的表，它不支持按时间戳分区的表)。
这些表用于存储特定时间片中的大量数据。第一个表包含较高时间粒度的最新数据，假设为1分钟时间片，第二个表包含较低粒度的较旧数据，假设此处为1小时时间片。
因此，我有一个查询，它汇总比1分钟时间片的特定时间量更早的数据，以便我拥有1小时时间片的数据，并将其与1小时时间片一起插入到我的表中。
创建1小时时间片后，我想删除新的1小时时间片中包含的所有1分钟时间片。由于表是通过表示时间的字符串进行分区的，因此我可以删除相应的分区
浏览 4提问于2013-04-10得票数 2
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
腾讯云开发者
