Gremlin，how to get a Post以及所有评论和评论上的嵌套评论，有点像reddit。在c#中 - 腾讯云开发者社区

文章/答案/技术大牛

发布

高效爬取Reddit：C#与RestSharp的完美结合

介绍在数据驱动的时代，网络爬虫已经成为获取网页数据的重要工具。Reddit，作为全球最大的社区平台之一，以其丰富的用户生成内容、广泛的讨论话题和实时的信息更新吸引了大量用户。...对于研究人员和开发者而言，Reddit提供了宝贵的数据源，可用于文本分析、舆情监控和趋势研究等多个领域。然而，由于Reddit的内容实时更新频繁、用户互动活跃，直接爬取其数据面临诸多挑战。...为了解决这些问题，本文将探讨如何使用C#和RestSharp库，结合代理IP技术和多线程技术，实现高效的Reddit内容爬取。...提取帖子标题、得分和评论数，并进行统计分析。...输出部分帖子标题及统计结果，包括帖子数量、平均得分和平均评论数结论通过本文的技术分析和代码实现，展示了如何使用C#和RestSharp库，结合代理IP和多线程技术，实现高效的Reddit内容爬取。

8721 0

如何使用 Python 抓取 Reddit网站的数据？

第 3 步：类似这样的表格将显示在您的屏幕上。输入您选择的名称和描述。在重定向 uri框中输入http://localhost:8080 申请表格第四步：输入详细信息后，点击“创建应用程序”。...开发的应用程序 Reddit 应用程序已创建。现在，我们可以使用 python 和 praw 从 Reddit 上抓取数据。记下 client_id、secret 和 user_agent 值。...授权实例：使用授权实例，您可以使用 Reddit 帐户执行所有操作。可以执行点赞、发帖、评论等操作。...在本教程中，我们将仅使用只读实例。抓取 Reddit 子 Reddit 从 Reddit 子版块中提取数据的方法有多种。Reddit 子版块中的帖子按热门、新、热门、争议等排序。...我们需要 praw 模块中的 MoreComments 对象。为了提取评论，我们将在提交对象上使用 for 循环。所有评论都会添加到 post_comments 列表中。

5K2 0

您找到你想要的搜索结果了吗？

是的

没有找到

Reddit技术分享被群嘲为「无耻的自我宣传」

结果就导致了开发人员花了很多时间来提高他们软件的准确性和性能，而他们所有努力的成果都有可能被错误的软硬件耦合选择所抵消。...这个问题困扰了他很久，所以就和Nebuly的几个哥们儿（都曾在麻省理工学院、ETH和EPFL工作过），在一个名为nebullvm的开源库中投入了大量精力，开发了一个让任何开发者都能使用DL编译器技术，即使你对硬件一无所知...下面回复的一个网友也表示，太多科技媒体不懂技术了，他们可能都不知道在PyTorch里面使用.cuda()可以直接提升1000倍模型速度？并怀疑早期的评论和点赞都是买的网络水军。...大多数开发者使用命令行和文本的原因是你要处理如此多的数据，而视觉效果只是一个障碍而非帮助；也有网友持不同意见：如果你考虑到有多高比例的潜水和这个subreddit上的人实际上并不是以ML为职业，也有很多学生和软件工程师...我看到更多的是人们在速度上下功夫，或者如何在代码上打补丁，尽管这对SLA来说不是必要的。分析性能不需要很大工作量，主要是因为很多从业者来自软件工程背景，他们认为可以努力和取得进展的内容就是运行速度。

6851 0

Visual Studio 2008 每日提示(十)

菜单：“工具+选项+文本编辑器+常规”，选中“在撤销列表中包括插入点”。评论：没想到吧，可以利用撤销功能回退到你鼠标点击过的位置。。...li=9ececfa9-f0cc-4274-b321-2ec49ce2e8ff 评论：此篇和上一篇一样，没具体介绍什么技巧，只是介绍阅读vs每日提示的工具。...你也可以修改高亮的颜色效果，方法如下菜单：工具+选项+环境+颜色和字体，在“显示项”选择“大括号匹配（突出显示）”，然后选择颜色。评论：这样设置后代码看起来比较清楚明晰。...#97、如何自己定义的文件类型指定语法高亮（类型）原文链接:How to get syntax highlighting for a given file extension 操作步骤： 1、给文件指定编辑器...如果你不想使用导航栏，操作如下菜单：工具+选项+文本编辑器+所有语言+常规，不选中“导航”。评论：这篇用处似乎不大？。

1.8K7 0

评论系统的几种展示结构和存储设计

contentTEXT评论的文本内容。post_timeTIMESTAMP评论被发表的时间，可以用来排序评论。target_idINT评论所针对的对象的唯一标识符，例如一个文章、产品或其他用户。...使用场景和例子嵌套式（树形）评论结构适用于许多在线交互场景，特别是那些需要深度讨论和多层次对话的场合。下面是一些使用嵌套式树形结构的站点Reddit3....树形评论结构的存储设计树形评论结构的典型存储设计通常有两种主要的方法：邻接列表模型和路径枚举模型。邻接列表模型：在这种模型中，每个评论都有一个父评论ID字段。...顶级评论的父评论ID通常设置为null或特定的值。这种方法的优点是数据结构简单，易于理解和实现。但是，查询特定评论的所有子评论或者查询特定评论的所有祖先评论可能需要多次查询数据库，效率较低。...这种结构的主要优点是它可以方便地跟踪和组织讨论的线索，使得用户可以更容易地理解和参与到讨论中。同时限制评论层级，又不至于让用户过度沉浸在评论的交互中，回归主题。2.

2.1K2 1

WordPress插件大全

GT Post Approval – 在多用户博客中以管理员身份查看日志时添加“Approve”和“Reject”按钮。...Next/Previous Post in same Category – 在文章里展示同类别的上一篇和下一篇。 No ping wait – 无需等待后台ping back的时间。...Commentluv – 在评论中能显示评论者最新文章标题。 Crossroads – 增加来自Flickr的缩略图和评论。 Custom Smileys – 在评论中添加表情显示。...Get Recent Comments – 显示最新回复的摘要，可以设置为不显示 trackback。 Gravatar – 在评论中显示基于Gravatar的头像。...Latest Comments with Avatars Reloaded – 显示最后发表的评论以及其所有者的MyBloglog头像。

3K5 0

Rust 外刊评论

AMD 和 Nvidia 都花费大量资金确保他们的编译器链与 C++ 兼容，因此使用 C++ 时很容易在 GPU 上启动和运行。但是像 rust-cuda 这样的库，依旧很有前景。...《停止抱怨Rust炒作》[36]在 Reddit 上引起了讨论。...我们来看看 Reddit 里评论怎么说的，这里摘录几条： “我选择在我的公司采用 Rust，并帮助所有其他 3 名工程师学习这门新语言。对于 Rust 炒作的各种抱怨，我基本上只是一个旁观者”。...其实，在 Rust 里，Move 语义是语言的语义，像上面的结构体 Massive，它是存储在栈上。栈上的数据，如果要实现 Move 语义，那么必须经过 memcpy （按位复制）来进行 Move。...学生将具备 Java、C 和 C++（包括其最新特性，如概念）、并发编程和算法以及数据结构的丰富知识。他目前的教学计划大概如下：将官方的 the book 作为教材。

1K3 0

BERT 与 CoCoLoFa 联手：提高逻辑谬误检测的准确性与效率！

在每个阶段中，作者在界面上的文章部分下方添加了上一轮收集到的评论。第二到第四轮的工人可以通过选择下拉菜单中的评论ID来回应上一轮的评论（图2D）。每个工人只与一篇文章互动一次。每种谬误类型的概率。...然而，专家 2 在两个数据集的几乎所有错误类型上，对标签的异议都更大。表3 还显示，专家们在两个数据集上的共识很低，尤其是在草率概括方面。...在CoCoLoFa上微调的BERT实现了最高的F1分数（0.86），并在与在Reddit上进行微调相比表现出更好的泛化性。它在逻辑和逻辑气候方面超过了在Reddit上进行微调的BERT。...当在Reddit数据集上进行测试时，BERT和NLI模型在CoCoLoFa上分别比其Reddit调优的对应模型低0.19和0.09个F1分。...相反，在CoCoLoFa上，Reddit调优的BERT和NLI模型分别比在CoCoLoFa上进行微调的模型低0.24和0.21个F1分。此外，特别是GPT-4o在Reddit数据集上表现最佳。

4080 0

RedditC2：一款基于Reddit API的C2流量托管工具

该项目仅出于教育目的或测试目的开发和使用，请在获得测试授权后谨慎使用。工具要求该工具基于Python 3开发，因此我们首先需要在本地设备上安装并配置好Python 3环境。...中即可；最后，运行下列命令启动Teamserver： python3 teamserver.py 代理配置首先，在Project标签中点击Manage Nuget Packages...：...Post，然后使用命令“in:”发布一个新的评论； 2、读取包含了单词“out:”的新评论； 3、如果没有找到这样的评论，则返回第二步； 4、解析并解密评论，并读取输出； 5、将现有评论编辑修改为“executed...”以避免命令重复执行； Client 1、访问一个指定的Reddit Post，然后读取包含了“in:”的最新评论； 2、如果没有检测到新的评论，则返回第一步； 3、解析并解密评论中的命令，然后在本地执行...； 4、加密命令的输出结果，并在相应的评论中回复（“out:”）；工具使用截图下面给出的是异或加密的C2流量演示：扫描结果由于该工具本质上属于一个自定义C2植入物，因此我们需要使用反病毒产品来进行检测和测试

6253 0

《ElasticSearch6.x实战教程》之父-子关系文档

本章作为复杂搜索的铺垫，介绍父子文档是为了更好的介绍复杂场景下的ES操作。在非关系型数据库数据库中，我们常常会有表与表的关联查询。例如学生表和成绩表的关联查询就能查出学会的信息和成绩信息。...此时文章本身就是"父"，而评论就是"子"，这类问题也可以通过nested嵌套对象实现，大部分情况下netsted嵌套对象和parent-child父子对象能够互相替代，但他们仍然不同的优缺点。..."嵌套"文章"中的。...查询作者为“OKevin”文章的所有评论（父查子） GET http://localhost:9200/blog/article/_search { "query":{ "has_parent...nested嵌套对象和parent-child父子文档之间最大的区别，嵌套对象中的"父子"是一个文档数据，而父子文档的中的"父子"是两个文档数据。

1.2K2 0

【详解】ElasticSearch嵌套聚合，下钻分析，聚合分析

ElasticSearch嵌套聚合：下钻分析与聚合分析在大数据时代，数据的分析和处理能力成为了企业竞争力的重要组成部分。...嵌套文档简介在 Elasticsearch 中，嵌套类型允许我们将一个对象数组作为单个单元来索引，同时保持每个对象的独立性。这意味着，即使在一个文档中，每个嵌套对象也可以被单独查询和过滤。...简单的嵌套聚合首先，我们可以通过嵌套聚合来获取所有标签的名称及其出现次数：GET /products/_search{ "size": 0, "aggs": { "all_tags": {...聚合与过滤结合如果只想查看价格超过100的商品中的标签分布，可以在聚合前添加一个过滤条件：GET /products/_search{ "size": 0, "query": { "range...通过上述示例，你可以看到如何构建基本的嵌套聚合查询，以及如何结合过滤条件和多级聚合来进行更精细的数据分析。希望这些信息对你有所帮助！如果有更多具体问题或需要进一步的例子，请随时提问。

2101 0

干货 | Elasticsearch Nested类型深入详解

0、概要在Elasticsearch实战场景中，我们或多或少会遇到嵌套文档的组合形式，反映在ES中称为父子文档。...2.1 问题背景在elasticsearch中，我们可以将密切相关的实体存储在单个文档中。例如，我们可以通过传递一系列评论来存储博客文章及其所有评论。...", 26 "commented_on": "20 Nov 2017" 27 } 28 ] 29} 如上所示，所以我们有一个文档描述了一个帖子和一个包含帖子上所有评论的内部对象评论。...为简单起见，我们在elasticsearch索引中只有1个文档。让我们通过查询索引来验证它： 1GET /blog/_search?...在内部，嵌套对象将数组中的每个对象索引为单独的隐藏文档，这意味着可以独立于其他对象查询每个嵌套对象。

4.7K3 0

实现Typecho说说功能

> 如何输出某个页面的最新n条评论，考虑到是在首页输出，因此不输出评论中的图片： // 输出评论中的文字的前30个字符， // $comments->content(); 可以输出评论中的所有内容接下来就是如何排除特殊情况，从输出的评论中过滤掉嵌套评论与非博主评论，需要修改文件var/Widget/Comments/Recent.php，在第45行后面添加： ->where('table.comments.authorId...更新解决上面遗留的问题，大佬泽泽社长给出了解决方案，如何在不影响侧边栏调用最新评论的基础上，对说说中仅输出博主的非嵌套最新评论。...> 完成以上修改可以完美避开博客主题侧边栏调用最新评论也过滤掉非博主评论以及嵌套评论的问题。

9501 0

基于内容热度的推荐

推荐系统本质上要拟合一个用户对内容满意度的函数[1]，函数需要多个维度的特征包括：内容、用户等作为输入。个性化推荐建立在大量、有效的数据基础上。...如果一个用户对某篇文章投了赞成票（或评论等其他操作），该文章的温度就上升一度。随着时间流逝，所有文章的温度都逐渐“冷却”，而且冷却的速度和当前温度-初始温度的差值成正比。...在一个评论系统中，我们的目的是找出最佳评论，不论它是什么时间提交的。 1927年Edwin B....8.Hacker News 排名算法工作原理(https://www.aqee.net/post/how-hacker-news-ranking-algorithm-works.html) 9.Reddit...排名算法工作原理(https://www.aqee.net/post/how-reddit-ranking-algorithms-work.html) 10.https://github.com/reddit-archive

4.6K2 0

如何用 GPT2 和 BERT 建立一个可信的 reddit 自动回复机器人？

在社交媒体网站上回复几个月前的评论是一件非常不正常的事情，因此能够以某种方式从 reddit 上获取最新的数据非常重要。...幸运的是，我可以使用 praw 库和下面的代码片段，从几个我认为会产生一些有趣响应的 reddit 中的前 5 个「上升」帖子中获取所有评论。...运行生成器和鉴别器最后，我只需要构建一些东西来重新加载所有经过微调的模型，并通过它们传递新的 reddit 评论来获得回复。在理想的情况下，我会在一个脚本中运行 GPT-2 和 BERT 模型。...id=1Z-sXQUsC7kHfLVQSpluTR-SqnBavh9qC ），下载最新的评论，生成一批候选回复，并将它们存储在我的 Google 驱动器上的 csv 文件中。...usp=sharing ），其中包含了所有的候选答案以及 BERT 模型中的分数。最后，我知道在创作这样的作品时，肯定有一些伦理上的考虑。所以，请尽量负责任地使用这个工具。

4.2K3 0

Laravel Eloquent 模型关联关系（下）

从性能上来说，渴求式加载更优，因为它会提前从数据库一次性查询所有关联数据，而懒惰式加载在每次查询动态属性的时候才会去执行查询，会多次连接数据库，性能上差一些（数据库操作主要开销在数据库连接上，所以在开发过程中如果想优化性能...：如果你想进一步过滤出文章标题和评论都包含「Laravel学院」的用户，可以在上述闭包函数中通过查询构建器进一步指定： $users = User::whereHas('posts', function...注：实际开发中为了提高查询性能，我们往往是在 posts 表中冗余提供一个 comments_count 字段，每新增一条评论，该字段值加 1，查询的时候直接取该字段即可，从而提高查询的性能。...在渴求式加载中，也可以通过闭包传入额外的约束条件，只不过这个约束条件是对关联模型自身的过滤，不影响目标模型的查询： $post = Post::with(['comments' => function...模型上的 author 属性时，就会返回如下默认的空对象了：该特性其实应用了设计模式中的空对象模式，好处是在代码里可以为不同情况编写一致性代码。

23.3K3 0

【机器学习圈子里的裙带关系】学术“朋友圈”罪与罚

作者，往往在Twitter上拥有几千乃至几万粉丝，在Twitter上把文章一发，论文在Twitter上得到更多关注。大家从论文的表述而非实际贡献来判断工作是否具有原创性（Novelty）。...metacurse的评论显然将问题过分简化，并且描述了极端情况。同时，考虑到Reddit社区论坛的特性，这里更多是在闲聊。但是，不可否认，他确实戳到了一个痛点。...而且在这里，我们都甚至不需要展开去谈双盲评审的有效性。知名学者和大V在论文传播中的“影响因子” 讨论中还引出了前不久谷歌大脑的一项工作。...GAN的发明人Ian Goodfellow（他本人并没有参与这项工作）在Twitter评论称：ML的研究人员、审稿人和有关ML的新闻报道，需要对结果的统计稳健性和超参数的效果进行更认真的研究。...Reddit用户NichG评论： “这篇论文宣称要纠察GAN研究方法中的不足，也即专门挑选好的结果来展示（cherry-picking），然而自己在方法上恰恰就犯了这样的错误。”

8717 0

来试试数组展平的小妙招！array.flat（）用法与array.flatMap() 用法及二者差异详解

③用途 array.flat()方法用于将一个嵌套数组（数组中的数组）展平成一个一维数组。...这个方法的语义化很明显，但是也可以通过嵌套的使用来实现基于array.flatMap()的映射和高维展平。...（带有附加信息的数据）在一个社交媒体应用中，用户可以对帖子进行评论，每个评论可能包含多个回复。...你需要将所有评论和回复展平，以便进行搜索或索引。 // 假设评论数据如下： const comments = [ { user: 'User1', comment: 'Great post!'...如果这篇博客能给您带来一点帮助，麻烦您点个赞支持一下，还可以收藏起来以备不时之需，有疑问和错误欢迎在评论区指出~

1.3K0 0

作为一名开发者，它把我惹毛了！！

不到几天的时间，这篇文章浏览量就 10 万+（这在国外内容 Medium 平台上算是爆款文章了），同时在 Reddit 上还有一个关于这篇文章的讨论区，里面充斥着很多反驳的评论。...他当时在评估之后，给出的预估计时间是 34–36 小时，以及需要一名开发人员的支持。...在没有注释的情况下，当接手别人的代码时，任何一个细节都可能激发开发者的厌恶情绪。包括一些大括号之类的小事，不论是放在同一行，单独成行，或K＆R风格，都无法让所有人都满意。...代码审查和 pull request 在开发者群体中，code review 和 pull request 是备受争议的两个关键点。 code review 就像是公开邀请“羞辱”他人的编程能力。...从本质上讲，code review 和 pull request 是一个开放的舞台，允许别人对你所编写的代码自由评论。代码注释，真的有帮助？对于代码注释，不同的开发者有不同的看法。

4253 0

Visual Studio 2008 每日提示(三十七)

#371 、从“最近的文件”和“最近的项目”（菜单）移走项原文链接：How to remove items from the Recent Projects and Recent Files menus...同时，vs还会提示你，是否从“最近的项目”中删除不存在的项目或解决方案如果你想从“最近的文件”和“最近的项目”（菜单）移除项也可以用如下方法。...//www.watch-life.net/visual-studio/visual-studio-2008-tip-day-37.html 评论：如果你在开发过程中修改了有关环境设置，通过这个方法你可以很迅速的还原到自己喜欢的...如果你选择在c#的源代码文件中选择“class”关键字，然后按F1，将会打开如下帮助文章： class（C# 参考）在vs里的web浏览器里web文字里选择图个关键字，按F1也可以打开相关帮助。...例如在c#里，“class”关键字的动态帮助清单如下，在winform设计中的一个button，改变文本内容，动态帮助如下打开动态帮助，菜单：帮助+动态帮助评论：动态帮助会给开发带来不少的方便。

1.9K6 0

点击加载更多

高效爬取Reddit：C#与RestSharp的完美结合

如何使用 Python 抓取 Reddit网站的数据？

Reddit技术分享被群嘲为「无耻的自我宣传」

Visual Studio 2008 每日提示(十)

评论系统的几种展示结构和存储设计

WordPress插件大全

Rust 外刊评论

BERT 与 CoCoLoFa 联手：提高逻辑谬误检测的准确性与效率！

RedditC2：一款基于Reddit API的C2流量托管工具

《ElasticSearch6.x实战教程》之父-子关系文档

【详解】ElasticSearch嵌套聚合，下钻分析，聚合分析

干货 | Elasticsearch Nested类型深入详解

实现Typecho说说功能

基于内容热度的推荐

如何用 GPT2 和 BERT 建立一个可信的 reddit 自动回复机器人？

Laravel Eloquent 模型关联关系（下）

【机器学习圈子里的裙带关系】学术“朋友圈”罪与罚

来试试数组展平的小妙招！array.flat（）用法与array.flatMap() 用法及二者差异详解

作为一名开发者，它把我惹毛了！！

Visual Studio 2008 每日提示(三十七)

相关资讯

热门标签

活动推荐

运营活动

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐