文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

RAG 挑战赛冠军方案解析：从数据解析到多路由器检索的工程实践，推荐阅读！

有些文档存在字体编码问题：视觉上看文本是没问题的，但尝试复制或解析时会得到一堆乱七八糟的字符。...检索器（Retriever）是一个通用的搜索系统，它接收查询作为输入，并返回包含回答所需信息的 相关文本。 在基础实现中，它只是对向量数据库发起查询，提取 Top N 个结果。...无论是 OpenAI 还是其他大型提供商都没有提供，而我们不想为了管理另一个 API 余额而麻烦。 但如果我们有兴趣尝试交叉编码器重排序，我们推荐 Jina Reranker。...我们可以在这里查看重排序提示词：prompts.py 父页面检索 (Parent Page Retrieval) 还记得我们之前提到将文本分割成更小的块吗？好吧，这里有一个小但重要的注意事项。...它通常作为一个单独的参数传递给 API，例如一个 Pydantic 或 JSON schema（模式）。 这保证了模型总是返回符合所提供 schema 的有效JSON 数据。

1.3K20
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    Python+MySQL数据库编程

    使用简单的纯文本文件可实现的功能有限。诚然，使用它们可做很多事情，但有时可能还需要额外的功能。你可能希望能够自动完成序列化，此时可求助于shelve和pickle（类似于shelve）。...，就返回None fetchmany(size) 取回查询结果中的多行，其中size的值默认为arraysize fetchall() 以序列的方式取回余下的所有行 nextset() 跳到下一个结果集...为了能够与底层的SQL数据库正确的相互操作，DB API定义了一些构造函数和常量（单例），用于提供特殊的类型和值。...在单击这个链接打开的页面中有大量的数据文件，它们使用的是我们需要的纯文本（ASCII）格式。...就这里而言，这样做速度稍有提高，但如果使用的是通过网络连接的客户/服务器SQL系统，速度将有极大的提高。 ?

    3.4K10

    Code Buddy 玩转 腾讯地图 MCP Server

    腾讯地图WebService API 是基于 HTTPS/HTTP 协议构建的标准化地理数据服务接口，为开发者提供了强大的地理信息查询功能，支持跨平台调用。...路径规划：根据用户的起点和终点，提供最优的路径规划服务，包括驾车、步行、公交等不同交通方式的规划。地理编码与逆地理编码：地理编码是将地址转化为经纬度，逆地理编码是将经纬度转化为地址信息。...key=OB4BZ-D4W3U-*****&format=0 在这个例子中，key 是开发者在腾讯位置服务平台申请到的 API 密钥，format=0 指定了返回的结果格式为易于理解的文本内容。...建议开发者使用调试工具（如 Postman）模拟 API 请求，检查返回数据是否正确。7....结语腾讯地图 WebService API 提供了一种简单、灵活的方式来获取地理信息服务，开发者只需申请 API 密钥并正确配置服务，便可快速集成到自己的应用中。

    46310

    Java安全编码实践总结

    安全编码实践 Sql注入防范 常见安全编码方法：预编译+输入验证 预编译适用于大多数对数据库进行操作的场景，但预编译并不是万能的，涉及到查询参数里需要使用表名、字段名的场景时(如order by、limit...错误写法：不能使用预编译的场景（直接拼接用户的查询条件） ? 漏洞利用验证： ? 不能使用预编译的正确写法（通过白名单验证用户输入）： ? 漏洞修复验证： ?...Nosql注入防范 涉及到非关系型数据库mongdb在查询时不能使用拼接sql的方式，需要绑定参数进行查询，跟关系型数据库的预编译类似 错误写法(拼接用户的查询条件)： ? 漏洞利用验证： ?...正确写法(参数绑定)： ? 漏洞修复验证： ? Xss防范 白名单校验 适用于纯数字、纯文本等地方，如用户名 Esapi 适用于常规的输入输出，如用户评论 ?...正确写法：使用Securerandom 漏洞修复验证（Securerandom不能指定seed，避免伪随机）： ? 条件竞争 Servlet的单例模式容易导致条件竞争，也是推荐白盒方式审计漏洞。

    1.9K30

    从提示工程转向 上下文工程，6种让LLM在生产环境中稳定输出的技术

    RAG系统返回了完美的文本块，提示词写得很漂亮，但LLM还是在产生幻觉；文档加得越多，回复质量反而越差。这些问题问题不出在提示词上，而是出在上下文上。...相关性重排：初始搜索基于向量相似度或关键词匹配返回前50个结果，但相似不等于相关。交叉编码器会把查询和每个文档放在一起联合阅读，重新排序。速度慢一些准确度高得多，重排之后只保留前5个。...已有研究证实，在检索前生成一条优化过的搜索查询能带来可观的准确率提升。 这看起来有点混乱，因为多加一步似乎应该让事情变复杂，但是其实逻辑很简单：模糊的查询返回模糊的结果，精确的查询返回精确的结果。...记忆与状态：保留的是关系，不只是事实 初学者容易在这里混淆两个概念。检索回答的是当前问题；记忆保留的是用户关系。 检索是实时的，每次查询都在全部文档中搜索相关文本块，每次查询都被当作独立事件。...工具感知上下文适用于答案依赖实时数据（股价、天气、库存）、构建的是智能体而非纯对话机器人（智能体会采取行动，聊天机器人只输出文本）、准确性取决于信息时效（不能凭空生成数字）、或需要降低幻觉率（工具提供事实依据

    14510

    【ES三周年】分布式搜索索引elasticsearch JavaAPI编写ES搜索

    查询时，文档结果会根据与搜索词条的关联度打分（_score），返回结果时按照分值降序排列。...部分，符合该条件的文档才会重新算分算分函数：符合filter条件的文档要根据这个函数做运算，得到的函数算分（function score），有四种函数weight：函数结果是常量field_value_factor...()构建一个match_all查询的DSL第三步，利用client.search()发送请求，得到响应这里关键的API有两个，一个是request.source()，其中包含了查询、排序、分页、高亮等所有功能...查询条件构造的API如下：图片 3.4.布尔查询布尔查询是用must、must_not、filter等方式组合其它查询，可以看到，API与其它查询的差别同样是在查询条件的构建，QueryBuilders...结果解析：结果除了要解析_source文档数据，还要解析高亮结果3.6.1.高亮请求构建高亮请求的构建API如下：图片上述代码省略了查询条件部分，但是大家不要忘了：高亮查询必须使用全文检索查询，并且要有搜索关键字

    2.1K51

    基于大语言模型构建知识问答系统

    微调的结果不一定符合预期。在尝试使用ADGEN数据集微调后，模型对“广告词生成”任务的确变好，但其他任务的回答均不如原始模型。基于 Prompt将特定领域的知识作为输入消息提供给模型。...举个例子给 ChatGPT 发送请求，将特定的知识放在请求中，让 ChatGPT 对消息中蕴含的知识进行分析，并返回处理结果。优势。正确性和精度高。劣势。...以图的形式描述知识点以及相互间的关系，然后通过图搜索算法寻找与查询请求匹配的结果。Embedding-based search。将文字形式的查询请求，编码为数值向量的形式，体现潜在的关系。...使用OpenAI 的 Completion API 对这些原始材料进行加工完善，并将最终结果返回。下面对上述过程展开描述。...采用合适的方式收集这些数据并整理为纯文本的格式。

    7K85

    Python采用高德api实现地图功能

    介绍高德地图为个人开发者开放了一定免费次数的api，包括地理/逆地理编码、路径规划、行政区域查询、交通事件、IP定位、坐标转换等服务。...-我的应用，然后添加key3.添加key，服务平台选择Web服务，其他的自己随意填写咯4.记下key，后面的每次调用都需要这个key开冲1.地理/逆地理编码地理编码/逆地理编码 API 是通过 HTTP...适用场景地理编码：将详细的结构化地址转换为高德经纬度坐标。且支持对地标性名胜景区、建筑物名称解析为高德经纬度坐标。逆地理编码：将经纬度转换为详细结构化的地址，且返回附近周边的POI、AOI信息。I....，往往会返回很多个结果，此时添加限定条件将提高搜索的准确性。...必须无poitypePOI类型，逆地理编码在进行坐标解析之后不仅可以返回地址描述，也可以返回经纬度附近符合限定要求的 POI 内容（在 extensions 字段值为 all 时才会返回 POI 内容）

    1.1K10

    ElasticSearch-查询

    match查询时，文档结果会根据与搜索词条的关联度打分（_score），返回结果时按照分值降序排列。...：filter部分，符合该条件的文档才会重新算分 算分函数：符合filter条件的文档要根据这个函数做运算，得到的函数算分（function score），有四种函数 weight：函数结果是常量...，而不能是范围这样的查询。...查询条件构造的API如下： 3.4.布尔查询 布尔查询是用must、must_not、filter等方式组合其它查询，代码示例如下： 可以看到，API与其它查询的差别同样是在查询条件的构建，QueryBuilders...结果解析：结果除了要解析_source文档数据，还要解析高亮结果 3.6.1.高亮请求构建 高亮请求的构建API如下： 上述代码省略了查询条件部分，但是大家不要忘了：高亮查询必须使用全文检索查询，并且要有搜索关键字

    1.1K10

    三步入门：利用 Dify 可视化工作流连接 LLM 与工具

    传统编码方式需要处理复杂的API调用、数据转换和错误处理，而Dify提供的可视化工作流功能，让这个过程变得直观且高效。...例如，如果你要创建天气查询助手，可以输入：请根据用户的问题提取地理位置信息。 用户问题：{{query}} 只返回城市名称，不要添加任何解释。...“文本生成”节点，用于将工具返回的原始数据转换为友好回复：{{user}}您好！...假设你需要一个能理解自然语言查询的天气助手：工作流结构：开始 → LLM（提取城市） → HTTP请求（调用天气API） → 条件判断（检查数据有效性） → 文本生成（格式化回复） → 结束关键配置细节...：在LLM提示词中强调“只返回城市名”在HTTP请求节点添加错误处理分支使用条件节点处理“城市不存在”的情况在最终回复中添加穿衣建议（基于温度值）进阶技巧并行处理多个工具对于需要同时查询多个数据源的情况

    32110

    架构师技能1：Java工程规范、浅析领域模型VO、DTO、DO、PO、优秀命名

    2）封装第三方接口：对第三方平台封装的层，预处理返回结果及转化异常信息，如rpcMannager。 3） 与 DAO 层交互，对 DAO 的业务通用能力的封装。...但优点在于简单： 对于只有少量业务逻辑的应用来说，使用起来非常自然； 开发迅速，易于理解； 注意：也不能完全排斥这种方式。 缺点无法良好的应对复杂逻辑。...如果是数据库表的映射类DO，最好是越简单越好 如果是封装查询条件、查询结果（如dto之类）是可以加一些简单逻辑在里面的。...1） 返回真伪值的方法 单词 位置 意义 例子 is 前缀 对象是否符合期待的状态 isValid can 前缀 对象能否执行所期待的动作 canRemove has 前缀 对象是否持有所期待的数据和属性...意义 例子 ensure 前缀 检查是否为期待的状态，不是则抛出异常或返回error code ensureCapacity validate 前缀 检查是否为正确的状态，不是则抛出异常或返回error

    4.9K12

    ElasticSearch基础语法

    最后为条件修改，仅在符合条件时修改 3、查询文档 get 请求 http://{url}/{index}/{type} 结果： { "_index": "customer", // 在哪个索引...如果query中只有should且只有一种匹配规则，那么should的条件就会被作为默认匹配条件二区改变查询结果。...在elasticsearch中，执行搜索返回this（命中结果），并且同时返回聚合结果，把以响应中的所有hits（命中结果）分隔开的能力。...这是非常强大且有效的，你可以执行查询和多个聚合，并且在一次使用中得到各自的（任何一个的）返回结果，使用一次简洁和简化的API避免网络往返。...比如：使用maping来定义： 哪些字符串属性应该被看做全文本属性（full text fields）； 哪些属性包含数字，日期或地理位置； 文档中的所有属性是否都嫩被索引（all 配置）； 日期的格式

    1.5K10

    Code Buddy 玩转 腾讯地图 MCP Server

    腾讯地图WebService API 是基于 HTTPS/HTTP 协议构建的标准化地理数据服务接口，为开发者提供了强大的地理信息查询功能，支持跨平台调用。...路径规划：根据用户的起点和终点，提供最优的路径规划服务，包括驾车、步行、公交等不同交通方式的规划。地理编码与逆地理编码：地理编码是将地址转化为经纬度，逆地理编码是将经纬度转化为地址信息。...key=OB4BZ-D4W3U-*****&format=0 在这个例子中，key 是开发者在腾讯位置服务平台申请到的 API 密钥，format=0 指定了返回的结果格式为易于理解的文本内容。...建议开发者使用调试工具（如 Postman）模拟 API 请求，检查返回数据是否正确。7....结语腾讯地图 WebService API 提供了一种简单、灵活的方式来获取地理信息服务，开发者只需申请 API 密钥并正确配置服务，便可快速集成到自己的应用中。

    1.1K10

    Elasticsearch基础（四）：Elasticsearch语法与案例介绍

    因为这是ES搜索引一个很大的特点，它查询速度之所以这么快也和这个有很大关系。但更重要的是，如果不了解ES会对存储的索引文本或者查询query进行分词，后面的语法将很难理解。...Elasticsearch中terms查询的特点是查询事实上就是多个term查询取一个交集，也就是要满足多个term查询条件匹配出来的结果,只要有一个匹配成功就返回。...2.8、bool bool查询是上面查询的一个综合，它可以用多个上面的查询去组合出一个大的查询语句，它也有一些关键字： must：代表且的关系，也就是必须要满足该条件 should：代表或的关系，代表符合该条件就可以被查出来...(满足其中部分条件） must_not：代表非的关系，也就是要求不能是符合该条件的数据才能被查出来 GET /textbook/_search { "query":{ "bool...must里面的match是必须要符合的，但是should里面的条件符合一条即可。

    83910

    纯小白入门：手把手教你实现第一个MCP服务器

    无需AI背景，从零开始掌握模型上下文协议本文面向毫无经验的纯小白，旨在通过详细的步骤和易懂的讲解，帮助你完成第一个MCP服务器的搭建和使用。...返回值：函数返回ToolResult对象，其中content是给AI模型看的结果，isError=True表示此次调用失败。四、测试MCP服务器1....五、实战进阶：封装高德地图API除了天气查询，我们还可以尝试更实用的功能。...以下是一个集成高德地图地理编码API的示例：@app.tool()async def geocode_address(address: str) -> Tool: """根据中文地址获取其经纬度坐标...工具调用返回错误问题：API密钥无效或网络连接问题解决：检查API密钥是否正确，网络是否通畅七、学习资源与下一步完成以上步骤后，你已经成功创建了第一个MCP服务器！

    3.9K20

    Nebula 基于 ElasticSearch 的全文搜索引擎的文本搜索

    对于第三方全文引擎来说，目前只使用了一些基本的数据导入、查询等功能。如果是要做一些复杂的、纯文本的查询计算的话，Nebula 目前的功能还有待完善和改进，期待广大的社区用户提出宝贵的建议。...目前所支持的文本搜索表达式如下： 模糊查询 前缀查询 通配符查询 正则表达式查询 2.2 性能 这里所说的性能，指数据同步性能和查询性能。...Collect Constant Values：将返回的查询结果作为常量值，生成 Nebula 内部的查询表达式。...例如原始的查询请求是查询 C1 字段中以“A”开头的属性值，如果返回的结果中包含 “A1” 和 "A2"两条结果，那么在这一步，将会解析为 neubla 的表达式 C1 == "A1" OR C1 ==...在"Fulltext Cluster"这一步中，可能会有查询性能慢，或海量数据返回的情况，这里我们提供了 LIMIT 和 TIMEOUT 机制，实时中断 ES 端的查询。

    1.6K00

    Flink流之动态表详解

    3.动态表和连续查询是什么关系？ 4.连续查询本文列举了什么例子？ 5.Flink的Table API和SQL支持哪三种编码动态表更改的方法？...在查询执行期间，动态表不一定（完全）物化。 在下文中，我们将使用具有以下模式的单击事件流来解释动态表和连续查询的概念： [Plain Text] 纯文本查看 复制代码 ?...如果仅跟踪注册用户，则要维护的计数可能不会太高。 但是，如果未注册的用户分配了唯一的用户名，则要维护的计数数将随着时间的推移而增长，最终可能导致查询失败。 [SQL] 纯文本查看 复制代码 ?...只要click表接收到新行，就会更新用户的lastAction并且必须计算新的排名。 但是，由于两行不能具有相同的排名，因此所有排名较低的行也需要更新。 [SQL] 纯文本查看 复制代码 ?...通过将INSERT和UPDATE编码为upsert消息并将DELETE更改为删除消息，将具有唯一键的动态表转换为流。 流运算需要知道唯一键属性才能正确应用消息。

    4.8K10

    由enctype-引出post与get的关系，最后深究至请求响应报文

    3. enctype="text/plain" 编码方式：表单数据以 纯文本形式 编码，仅对空格进行简单处理（转换为加号 +），不对其他字符转义（如特殊符号保持原样）。...） multipart/form-data 分块传输，支持二进制数据 文件上传、含文件的表单 必须为POST text/plain 纯文本，仅简单处理空格 极少用（简单文本调试） 无（GET/POST均可...普通文本数据也可用 application/x-www-form-urlencoded 编码（类似 GET，但数据在请求体中）；text/plain 编码则以纯文本传输（极少用）。...当 enctype="text/plain"： GET 和 POST 也可使用，但该编码过于简单（仅简单处理空格），实际中很少用，仅在极简单文本传输时考虑。...常见内容： 网页 HTML（如你访问百度时，服务器返回的 HTML 代码） 接口数据（如 JSON、XML，比如天气 API 返回的天气信息） 二进制文件（如图片、视频、PDF，直接传输字节数据

    19310
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券