文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

Github Action实现友链状态检测

偶然间在一次日常的糖果屋QQ群闲聊中，我看到了群友安小歪分享的一个方案，他利用GitHub Actions调度脚本运行，并最终生成比较简洁的HTML页面展示检测结果，这一思路极大地启发了我。...API访问数据，api包含数据包括可达链接，不可达链接，可达链接数目。不可达链接数目，更新时间戳，其中链接中包含站点名称和地址，便于前端部署。...测试脚本使用python，使用Request包的get和head两种检测方式检测，尽可能减少误判概率。 前端采用缓存，减少api调用次数，缓存半个小时刷新，基本不影响实时性。...为了方便，可以写一个脚本，代替执行hexo d的功能（可选）： @echo off E: cd E:\Programming\HTML_Language\willow-God\blog node link.js...它首先使用fetch API请求JSON数据，然后解析数据，并根据数据中的可访问链接和不可访问链接列表，为页面上的.site-card元素添加状态标签。

54110
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    从官方文档到0day挖掘思路

    功能： 1、可以执行脚本（支持以GLUE模式开发和运行脚本任务，包括Shell、Python、NodeJS、PHP、PowerShell等类型脚本） 2、原生提供通用命令行任务Handler（Bean任务...从上可以看出，调度中心可以管理任务，并无直接执行命令的功能，而执行器才是执行脚本命令的关键。 0x03 分析项目 下面是调度中写配置，未发现有什么敏感信息及可利用。...调度中心 RESTful API API服务位置：com.xxl.job.core.biz.AdminBiz（com.xxl.job.admin.controller.JobApiController...执行器 RESTful API API服务位置：com.xxl.job.core.biz.ExecutorBiz API服务请求参考代码：com.xxl.job.executorbiz.ExecutorBizTest...Token正确返回包 HTTP/1.1 200 OK content-type: text/html;charset=UTF-8 content-length: 12 {"code":200} 意外发现

    1.6K20

    用 Python 把 PDF 玩的明明白白

    功能 原生 HTML 文本，具有精确的字体和位置。 灵活的输出：一体化 HTML 或按需页面加载（需要 JavaScript）。 文件大小适中，有时甚至比 PDF 还小。...解析、分析和转换 PDF 文档。提取内容为文本、图像、html 或 hOCR。支持 PDF-1.7 规范。（差不多吧）。支持中日韩语言和竖排书写脚本。...支持 RC4 和 AES 加密。支持 AcroForm 交互式表单提取。目录提取。标记内容提取。自动布局分析。...，包括标题、段落、列表等 提取图像、图片描述、表格、表格标题及脚注 自动识别并转换文档中的公式为 LaTeX 格式 自动识别并转换文档中的表格为 HTML 格式 自动检测扫描版 PDF 和乱码 PDF，...下载模型权重文件步骤后，脚本会自动生成用户目录下的 magic-pdf.json 文件，并自动配置默认模型路径。您可在【用户目录】下找到 magic-pdf.json 文件。

    1.4K10

    用 Python 的 Template 类生成文件报告

    2、它是轻量级的，当然诸如Jinja2和Mako之类的模板引擎已被广泛使用。但是，在本文介绍的方案中，这些功能是过分地夸大了。...由于这些优点，一些知名的第三方库和工具正在使用它。Wily是一个例子，在2018年底，Wily的发明者和维护者Anthony Shaw希望支持HTML作为wily生成的报告的输出格式。...我们使用引导程序进行样式设置，并创建了最终表的基本结构。表头已包含在内，但数据仍然丢失。请注意，在tbody元素中，使用了一个占位符$ {elements}来标记我们稍后将注入书籍列表的位置。...我们把所有都已设置为实现生成所需输出的Python脚本！因此，我们在当前工作目录中创建一个名为report.py的新Python文件。首先，我们导入所需的两个内置模块，并从JSON文件加载数据。...但是这可能在其他地方引起意外的副作用。 本文概要 在阅读本文时，您不仅学习了Python字符串的基本知识。Template类以及使用它的原因，而且还实现了第一个文件报告脚本！

    1.6K20

    怎么用python代码根据历史数据预测

    作为Python开发者，我们经常遇到需要从各种来源和格式（如 PDF、CSV、HTML等）中提取数据的情况。...在这篇文章中，我们将深入研究从PDF文件中解析数据，并介绍一些对解析其他数据格式有用的 Python 包。 用Python解析PDF文件 PDF是一种标准文件格式，广泛用于共享和打印文件。...如果你知道你想提取的PDF文件中的数据的确切位置，它就特别有用。...HTML解析：Beautiful Soup Beautiful Soup是一个Python库，用于从HTML和 XML文件中提取数据的网络搜刮。...总结 在这篇文章中，我们只是触及了Python中数据解析的表面。根据你的具体需求和数据的复杂性，你可能需要考虑其他的库和工具。

    67710

    ​什么是 JavaScript？

    JS 的定义 JavaScript 是一种脚本，一门编程语言，它可以在网页上实现复杂的功能，网页展现给你的不再是简单的静态信息，而是实时的内容更新，交互式的地图，2D/3D 动画，滚动播放的视频等等。...浏览器 API 主要包括： 文档对象模型 API，一般称为 DOM API，包括创建、修改、移除 HTML 节点，移除与应用 CSS 样式等，这也是 JS 在页面上主要的用武之地； 地理位置 API，是用于获取地理信息的...； 画布 Canvas 及 WebGL API，用于创建和控制 2D、3D 图像； 多媒体影音类 API，例如 HTMLMediaElement 和 WebRTC 等； 其它浏览器提供的接口。...布局：渲染树形成的时候，每个 HTML 节点是有自己的样式的，但大小和位置还没有确定，在这一步，渲染引擎将从渲染树的根节点开始，遍历整颗树，处理与确定所有节点的大小及位置信息，这便叫布局。...如果脚本需要等待页面解析，且依赖于其他脚本，调用这些脚本时应使用 defer，将关联的脚本按所需顺序置于 HTML 中。

    77120

    「译文」给讨厌YAML的人的10个写YAML的建议

    它是错误的行号和列号。你可能不知道它说的是什么错误，但现在你知道错误的位置了。再看一遍位置，错误的本质就显而易见了。...自转换（Self-conversion） 在自转换方法中，数据文件也是生成 YAML 的 Python 脚本。这对于小数据集最有效。...脚本转换 在这个方法中，使用 JSON 编写代码，然后运行 Python 转换脚本生成 YAML。这比自转换的伸缩性更好，因为它使转换器与数据分离。...该脚本导入 Python YAML 和 JSON 模块，加载用户定义的 JSON 文件，执行转换，然后将数据写入 output.yaml。 #!...有时配置文件会自动增长，最好将其重构为简单的 Lua 或 Python 脚本。 YAML是一个很棒的工具，因其极简和简单而在用户中很受欢迎，但它不是您的工具包中唯一的工具。

    1.8K30

    巧夺天工：VSCode Python 终端环境隔离的背后原理

    Python 的解决方案：预设环境变量VSCode Python 插件采用了一个巧妙的方案：在选择 Python 解释器时，就一次性获取所有需要的环境变量，然后通过 VSCode 的 API 预设到新终端中.../path/to/venv/bin/activate：激活环境，修改当前进程的环境变量echo 'e8b39361-0157-4923-80e1-22d70d46dee6'：打印一个特殊的标记字符串python...：三个命令在同一个 shell 进程中执行，所以 Python 脚本能获取到激活后的环境变量通过 echo 特殊标记，可以在输出中准确定位到环境变量 JSON 的起始位置printEnvVariables.py...会将环境变量以 JSON 格式输出，便于解析环境变量的应用获取到环境变量后，插件通过 VSCode 的环境变量集合 API 将它们应用到新终端：envVarCollection.replace('PATH...总结VSCode Python 插件的终端环境隔离方案十分巧妙：理解本质：环境激活本质上就是修改环境变量预设而非反应：提前获取和设置环境变量，而不是在终端创建后再执行命令细节处理：通过三段式命令和特殊标记确保环境变量获取的准确性优雅降级

    41800

    如何使用APIDetector高效识别目标域名暴露的Swagger节点

    关于APIDetector APIDetector是一款针对Swagger的强大安全扫描工具，该工具可以帮助广大研究人员高效扫描和识别目标Web域名及子域名中暴露的Swagger节点。...该工具是一款智能化工具，专为安全专家和开发人员设计，可以有效地执行真的Swagger的API安全测试和漏洞扫描。...apidetector.py -d example.com 从一个输入文件中扫描多个域名： python apidetector.py -i input_file.txt 指定一个输出文件： python...-t 20 同时扫描HTTP和HTTPS协议： python apidetector.py -m -d example.com 以静默模式运行脚本： python apidetector.py -...q -d example.com 使用一个自定义代理执行脚本： python apidetector.py -d example.com -ua "Mozilla/5.0 (Windows NT 10.0

    69810

    如何用Beautiful Soup爬取一个网址

    Beautiful Soup是一个Python库，它将HTML或XML文档解析为树结构，以便于从中查找和提取数据。它通常用于从网站上抓取数据。...网页是结构化文档，Beaut是一个Python库，它将HTML或XML文档解析为树结构，以便于查找和提取数据。在本指南中，您将编写一个Python脚本，可以通过Craigslist获得摩托车价格。...这些不是脚本中的错误，而是片段结构中的错误导致Beautiful Soup的API抛出错误。 一个AttributeError当点符号没有找到兄弟标签当前HTML标记将被抛出。...例如，如果特定代码段没有锚标记，那么代价键将抛出错误，因为它会横向并因此需要锚标记。 另一个错误是KeyError。如果缺少必需的HTML标记属性，则会抛出它。...这就是Craigslist如何知道下一页数据的开始位置： $ python3 craigslist.py Web Page: https://elpaso.craigslist.org/search/

    6.4K30

    如何使用OSIPs快速批量验证IP地址的有效性

    关于OSIPs  OSIPs是一款功能强大的Python脚本，该工具可以从一个目录中读取全部的文本文件，并从这些文本文件中收集IP地址信息，然后通过查询Whois数据库、TOR中继和地理位置服务来对目标...该脚本能够递归扫描给定目录中的所有文件，并提取出所有的IPv4和IPv6地址，然后过滤出公共IP。...分析完成后，工具将会输出四个文件：包含了所有IP地址详细信息的JSON文件和CSV文件，一个包含了所有IP地址索引目录的CSV文件，以及一个包含了所有IP地理位置信息的KML文件。  ...WhoIs信息； 5、根据TOR中继查询所有公共IP地址； 6、收集所有公共IP地址的地理位置信息； 7、可以在非交互式模式下使用命令行参数运行，以便轻松集成到其他脚本中； 8、可以在没有参数的情况下运行...，并且可以交互提供输入值； 9、允许用户选择要执行或排除的步骤； 10、在控制台执行的每一步都详细地将信息输出到控制台； 11、导出CSV文件和JSON文件中的所有IP地址详细信息； 12、导出一个可以轻松加载到地图中的

    1.6K10

    挑战30天学完Python：Day29 Python Rest API

    HTTP是一种网络协议，用于传输资源，这些资源可以是世界范围内网站上的文件，无论它们是HTML文件、图像文件、查询结果、脚本或其他文件类型。...在响应中，这是请求的资源返回给客户端的位置（消息主体最常见的用法），或者在出现错误时提供解释性的文本。在请求中，这是用户输入的数据或上传的文件发送到服务器的位置。...RESTful API是一个应用程序接口(API)，它使用HTTP请求来获取、更新、创建和删除数据。在之前的章节中，我们学习了Python、Flask和MongoDB。...我们将利用所学知识来开发一个使用Python Flask和MongoDB的RESTful API。...接下来，让我们综合之前所学的内容，开发一个关于学生信息的管理服务API。此信息存储在mongodb中包含：姓名, 国家, 城市, 生日, 技能 和 简历.

    84730

    Python 项目组织最佳实践：从脚本到大型项目的进化之路

    在 Python 开发生涯中，相信很多人都是从写简单脚本开始的。随着项目规模扩大，我们会遇到各种项目组织的问题。...使用 python -m 运行模块：Python 会正确设置包的导入路径不依赖运行时的当前目录更符合 Python 的模块化思想__init__.py 的作用：将目录标记为 Python 包控制包的公共接口定义版本信息...，定义版本号和公共API __main__.py # 模块入口点，支持 python -m 方式运行 core/...：测试组件间交互端到端测试：测试完整流程文档完备：API文档：接口说明用户文档：使用指南开发文档：架构设计和贡献指南环境隔离：通过不同的 requirements 文件管理不同环境的依赖开发、测试、生产环境配置分离可维护性...通过遵循 Python 的最佳实践，我们可以构建出更加专业和可维护的项目。

    82001

    httprunner学习1-环境与登录接口案例

    前言 HttpRunner 是一款面向 HTTP(S) 协议的通用测试框架，只需编写维护一份 YAML/JSON 脚本，即可实现自动化测试。...使用环境： python 3.6 httprunner 1.5.8 具有以下优点： 继承 Requests 的全部特性，轻松实现 HTTP(S) 的各种测试需求 采用 YAML/JSON 的形式描述测试场景...，保障测试用例描述的统一性和可维护性 借助辅助函数（debugtalk.py），在测试脚本中轻松实现复杂的动态计算逻辑 支持完善的测试用例分层机制，充分实现测试用例的复用 测试前后支持完善的 hook...INFO Generated Html report: D:\soft\untitled\reports\1568906898.html D:\soft\untitled> 查看测试报告 运行完成后会在当前目录生成一个...report文件夹，里面会有一个html格式的报告文件，按时间戳生成的点开log可以查看详情 ?

    1.2K20

    Python 自动化指南（繁琐工作自动化）第二版：十六、使用 CSV 文件和 JSON 数据

    警告 和往常一样，每当你编写一个修改文件的程序时，一定要先备份这些文件，以防你的程序不按你期望的方式运行。你不想意外删除你的原始文件。...（访问 API 往往比下载网页和用 BeautifulSoup 解析 HTML 更方便。） 自动从您的一个社交网络帐户下载新帖子，并将其发布到另一个帐户。...json模块 Python 的json模块为json.loads()和json.dumps()函数处理带有 JSON 数据的字符串和 Python 值之间转换的所有细节。...然后在你的浏览器中访问openweathermap.org/api并注册一个免费帐户，以获得一个 API 密钥，也称为应用 ID，对于 OpenWeatherMap 服务来说，它是一个类似于'30144aba38018987d84710d0e319281e...除非你计划每分钟进行 60 次以上的 API 调用，否则你不需要为这项服务付费。对 API 密钥保密；任何知道它的人都可以编写使用您帐户的使用配额的脚本。

    16K40

    XMLHTMLJSON——数据抓取过程中不得不知的几个概念

    几天主要围绕三个核心概念来进行介绍： xml html json xml的官方解释是可扩展标记语言，主要用于数据传输，而HTML则是超文本标记语言，主要用于网页显示。...可以看到，主流网站涉及异步加载的内容，大多都选择了json作为数据交换格式，而静态网站或者不愿意开放api的网站，仍然使用html/xml较多。...因为xml/html是标记语言，虽然在某种程度上具有key-value的形式，但是因为标签对这种形式，无论是R语言还是Python都没法直接将它转化为关系表。...Python中的json包，提供了json.loads()用于加载并转换json数据为dict。...对xml及其解析工具的的掌握决定着html网页解析效率，对json的掌握则决定着调用服务器api并处理返回值的效率，所以xml和json相关内容在网络数据获取中至关重要。

    2.4K60
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券