首页
学习
活动
专区
圈层
工具
发布

学术数据采集中的两条路径:结构化提取与交互式解析

在科研信息服务领域,大家经常需要批量获取论文元数据,比如 标题、作者、期刊、引用关系 等。如果只是人工下载,无论效率还是覆盖度都远远不够。因此,自动化采集就成了必备手段。...本文以 Scopus 和 CNKI(中国知网) 为例,把这两类做法拆开讲清楚。...局限:只能获取“浅层数据”,比如列表信息。路径 B:模拟交互获取使用场景:CNKI 的引文网络、Scopus 的推荐文献。只有在点击或下拉时,前端才会发出异步请求。特点:能拿到隐藏在交互之后的数据。...数据存储抓取结果一般会落地到 MongoDB/MySQL,供后续的数据分析或知识图谱构建使用。三、示例代码下面用 Scopus 搜索“deep learning” 的结果做演示。1....列表页 ======url = "https://www.scopus.com/results?

37010

你该知道的杂志分区和影响因子及2018最新影响因子下载

这些期刊包括SCI收录的3800种核心期刊(光盘版)。 影响因子 影响因子一个让人爱恨交加的东西,若改变不了规则,那就想想如何在规则内把事情做好。...每个学科分类按照期刊的影响因子高低,平均分为Q1、Q2、Q3和Q4四个区:各学科分类中 影响因子前25%(含25%)期刊划分为Q1区,前25%~50% (含50%)为Q2区,前50%~75% (含75%...具体使用和描述见基于人工智能的文献检索,导师查找,更聪明。 research gate: 经常在用的。个人经常用它来提醒你关注的科学家或者课题。谁发文章了,会立刻通知你,让你享受被虐的酸爽。...每年评选的高引科学家就是根据这个数据库计算的,它支持作者检索和分析功能(涵盖了全球3000多万学者信息,每位作者在Scopus赋予了一个作者编码Author ID);针对每位作者,统计了其文献信息(总发文量...支持机构检索和分析功能(涵盖了高校、政府机构、科研机构、企业R&D等等,每个独立机构在Scopus中赋予了一个机构编码Affiliation ID);针对每个机构,统计了各机构的文献信息(总发文量,总被引次数

2.3K60
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Nature最新研究:数千学者每五天发一篇论文,这些高产作家背后的科研圈

    我们给265位作者发了邮件,询问了他们是如何达到这样高产的级别的。81人的回复都放在了补充信息里。...:化学(化学-晶体)/物理(物理-晶体)4区;小类:晶体学4区,中科院JCR分区:大类:化学 4区;小类:晶体学4区)。...Scopus数据库索引的期刊通常被认为是高质量的期刊。一般超高产作者的引用影响就很高,但是,存在很大的差异:每位作者被引用的中位数是19,805次(范围:380至200,439次)。...接下来的工作需要进一步探索如何将这些数据更好的规范化,以及确定最佳的标准化水平:例如,对学科范围、相对狭窄的研究领域或者深度特定的研究团队进行调整。...“我认为应该有不同级别的作者署名,而不是按顺序所暗示的那种!”有趣的是追踪如何评价创新,如数据引用或正式作者贡献分类法,可以改变作者署名的约定。作者署名规范可以在每个领域,甚至在每个团队中均不同。

    1.1K20

    AI学术打假指南!3分钟就阻止了 ChatGPT 瞎编文献

    为了帮大家避免踩坑,确保学术的严谨性,本文总结了一系列实用技巧,教你如何合理利用 ChatGPT ,高效获取真实可靠的学术文献。...Scholar AI 推荐理由: 整合多平台检索(如Scopus、Web of Science),并配备文献质量评分和相关度排序功能,帮助用户优先筛选高影响力论文,特别适合对文献质量要求严格的课题立项或论文写作...建议改成“能被Google scholar 检索”“3年内发布”这类精准指令。 推荐指令: 请以xx领域专家身份,推荐xx篇近x年发表于xxx核心期刊且与xx主题高度相关的文献。...五步交叉验证法 获得文献列表后,务必进行人工核查与验证,避免盲目引用。可参照以下“五步验证法”: ✅ 作者背景验证 验证作者身份,确认其在领域内的专业资质和学术贡献。...ChatGPT 作为辅助检索工具,确实能够带来便捷和灵感,但它并非专门的学术搜索引擎。学术研究讲究严谨和真实,理性使用AI技术,结合权威数据库和科学检验流程,才是高效找到高质量文献的“王道”。

    3.5K10

    如何快速梳理领域文献

    这样,你就可以看见哪一个主题(文献)下面回复(引用文献)的人更多,或者帖子的主题(文献聚类)有哪些。 有了这些线索,你就可以在浩如烟海的检索结果里锁定那些重点文献了。...常见的入口包括Scopus和Web of Science。注意这两个平台都有访问权限控制和单次下载文献信息的最大数量。请使用校园网IP地址登录操作,根据需要下载文献信息,并存储为合适的格式。...不同主题的文献会自动聚类,用不同颜色表示类别,文献之间的关联一目了然。 ? 有的主题词汇比其他的词汇更大,这表示了相关文献数量的多寡。...假如你关注期刊的联系,那么不妨采用共引(co-citation)关系来看期刊之间的关联网络。 ? 不同领域的期刊采用不同颜色标记。你会清晰看到不同领域期刊之间是如何发生联系的。...教程 如果你感兴趣的话,请阅读以下参考资料,一步步学习如何使用VOSviewer: VOSviewer教程。 VOSviewer分析样例图。 VOSviewer相关论文列表。

    1.5K20

    可视化经典:10幅精妙绝伦的科学视图

    “也许它们无法帮你找到回家之路,但却能让你纵观某些主题的全球视角。” 艺术展咨询委员会每年都会根据主题和某些核心标准来挑选出十幅获奖作品。...今年的“从视觉接口到数字图书馆的科学作图(science maps as visual interfaces to digital libraries)”主题类获奖作品于本周公布,而绘图的展示版预计将于六月中旬进行展出...爱萨提希望能通过图片表现出期刊的起源,以及特定科学领域在未来的兴衰涨落。...建筑学搜索元数据 为了使欧洲的所有建筑学数据更便于检索,几位用户创建了一个名为“欧洲建筑学目录元数据(Metadata for Architectural Content in Europe)”的分类树...图片来源:莫里茨·斯特凡(Moritz Stefaner) 分类树网站上的交互式图表让用户可以通过建筑学词汇来搜索网络。一旦某个词组被选定,相应的网站列表就出现在下方,大大节省了检索时间。

    79420

    50个ChatGPT顶级指令(附国内使用教程)

    中文提示词:基于您在[特定研究领域]的专业知识,请扩展并充实前述内容,以增强其深度、全面性和学术严谨性。请纳入相关的理论框架、方法论考虑因素和最新的实证研究结果,以强化论证。...中文提示词:作为学术研究方法论专家,请为[主题]的学术论文构建一个全面且逻辑结构清晰的大纲。...大纲应始于一个引人入胜的导言,明确阐述研究问题或问题,阐明该主题在更广泛学术讨论中的重要性,并详细说明具体的研究目标。...将原始文本放在第一列,更正后的版本放在第二列,并使用粗体格式突出显示所做的具体更正。...此分析应基于对主要学术数据库(包括但不限于Web of Science、PubMed、Scopus和ScienceDirect)中引文网络的广泛审查。请提供15种最合适的期刊列表,按相关性降序排列。

    1.4K10

    700亿美元投入AI,自动驾驶融资最多,学者「下海」激增:斯坦福2019 AI年度报告出炉

    它能够比较不同国家的全局活动,其中既包括国家之间对比的视角,也包括对特定国家的专门分析。尽管为国家之间的比较提供某种单一的排名会很吸引人,但实际操作起来却出奇地困难。...AI 论文在所有论文中的占比 根据 Scopus 的数据,从 1998 年到 2018 年,经过同行评议的 AI 论文数量增长了超过 300%,占同行评议期刊发表量的 3%,占已发表会议论文数的 9%。...Scopus 上的年度 AI 论文数量 ? Scopus 上的年度 AI 论文数量增长情况 3....最近发表的三种能成功处理这一任务的方法使用了额外的数据进行训练——图中用另一条线(橙色)标注。 ? 在 ImageNet 上的分类表现 2....在 2018 年中期到 2019 年中期的 3600 余篇全球 AI 和伦理新闻文章中,关于 AI 的使用伦理、数据隐私、人脸识别的应用、算法偏见和大型科技公司的框架和准则是主要话题。

    70050

    导师:利用ChatGPT这样写文献综述,轻松发SCI

    具体包括: 文献搜索策略:指定使用的数据库、搜索词组合及检索时间范围 文献筛选标准:明确的纳入和排除标准 数据提取方法:设计标准化的数据提取表格,列出需要从每篇文献中提取的具体信息 质量评估标准:选择适当的质量评估工具...(如JBI评估工具)并说明使用方法 数据分析方法:详细说明如何综合和分析提取的数据 请为每个步骤提供明确的操作说明和注意事项,以确保综述的系统性和可重复性。...,包括关键词、主题词和布尔运算符 设定搜索范围:时间跨度为[起始年份]至今,文献类型包括[期刊文章、会议论文等] 提供筛选标准:如引用次数前[X]位,发表于影响因子大于[Y]的期刊 建议补充性搜索方法,...如检查参考文献列表、查阅核心期刊等 请确保搜索策略的系统性和可重复性,并提供记录搜索过程的建议。...3.专业GPTs应用插件 推荐1——Consensus 推荐理由: “神级检索”2亿+篇文献库,均为评审认证的权威期刊真实文献(杜绝虚构论文情况) 功能演示教程:吊打Sci-hub?神级GPTs!

    91110

    PubMed使用者指南(一)

    2.我怎样通过作者检索? 3.我怎样通过期刊名检索? 4.通过一些信息比如作者、期刊名和出版时间,我怎样找到特定的引用? 5.我检索了太多引文,如何集中? 6.我检索了太少引文,如何扩展?...4.找到一条特定的引文 5.通过作者检索 6.通过期刊检索 7.通过日期检索 8.过滤 9.检索短语 10.截断检索条目 11.用布尔运算符(AND,OR,NOT)结合检索条目 如何检索PubMed?...PubMed中包含的期刊列表可以通过FTP获得。 通过日期检索 使用结果时间轴 按年时间轴单击并拖动结果上的滑块,可以更改检索的日期范围。...主题使用专门的检索策略。更多的主题过滤器和主题过滤器检索策略可在PubMed主题过滤器。 主题也可以使用aids[sb] or cancer[sb]进行检索。综述也包含在文章类型过滤器中。...期刊分类和更多的子集 使用附加过滤器按钮可以选择期刊类别添加到侧边栏: 1.Dental journals 2.MEDLINE 3.Nursing journals 期刊/引文子集限制检索专业期刊或其他期刊的专业主题文章

    10.6K10

    可视化经典:10幅精妙绝伦的科学视图

    “也许它们无法帮你找到回家之路,但却能让你纵观某些主题的全球视角。” 艺术展咨询委员会每年都会根据主题和某些核心标准来挑选出十幅获奖作品。...今年的“从视觉接口到数字图书馆的科学作图(science maps as visual interfaces to digital libraries)”主题类获奖作品于本周公布,而绘图的展示版预计将于六月中旬进行展出...爱萨提希望能通过图片表现出期刊的起源,以及特定科学领域在未来的兴衰涨落。...建筑学搜索元数据 为了使欧洲的所有建筑学数据更便于检索,几位用户创建了一个名为“欧洲建筑学目录元数据(Metadata for Architectural Content in Europe)”的分类树...图片来源:莫里茨·斯特凡(Moritz Stefaner) 分类树网站上的交互式图表让用户可以通过建筑学词汇来搜索网络。一旦某个词组被选定,相应的网站列表就出现在下方,大大节省了检索时间。

    97280

    【收藏】40 个学术网站,满足科研文献需求!

    系统提供刊名字顺浏览、学科分类浏览两种浏览方式,且浏览过程中可通过期刊的一般信息与详细信息切换提示,进一步了解某个期刊的全部信息,其中包括刊名、ISSN、主题、学科分类、期刊内容揭示层次等15种相关信息...同时用户可对刊名、ISSN、主题、出版者及全部字段进行期刊检索。 ?...除一般检索外,用户可按学科进行快速分类浏览,也可以依据OA期刊、核心期刊、NSTL订购期刊进行查找。该系统还对投稿及全文获取进行了很有效的指引。...、网站等),在列表中对免费出版物进行了标识,检索方便 30.Genamics JournalSeek 期刊信息检索系统 http://journalseek.net/index.htm 31.Hindawi...此外会提供与此期刊相关研究领域内的OA期刊列表(Alternative journals with Open Access)。

    31.2K11

    01.红楼梦主题演化分析——文献可视化分析软件CiteSpace入门

    本文主要介绍文献可视化分析软件CiteSpace基础知识,以中国知网《红楼梦》文献为例,开展主题挖掘、关键词聚类及主题演化分析。基础文章,希望对您有所帮助。...常用于文本主题挖掘、文本演化分析、知识发现等领域 CiteSpace软件基于共引分析和寻径网络算法等对数据样本进行可视化处理,呈现特定知识领域的演化过程。...此时共搜索3089篇期刊文献,然后依次“全选”按钮选中所需文献。 第二步,选中所有期刊后,点击“导出与分析”按钮,再选择里面的“Refworks”格式。...此外,有四类聚类方式,从左到右依次为:一减聚类(自动布局和风格)、根据Title标题聚类、根据KeyWords关键词聚类、根据Author作者聚类、KTA全部聚类(标题|关键词|作者)。...输出聚类结果如下图所示: 注意:更多设置请读者自行研究(如聚类数量设置),本文主要以入门普及为主。 2.主题演化分析 增加TimeLine时间轴即可显示对应的主题。

    1.2K20

    【AIGC】理工科研究中的学习目标与文献调研方法

    如何使用:通过学科数据库、期刊官方网站、学术搜索引擎等途径获取。 2. 学位论文 定义:学位论文包括硕士论文、博士论文等,通常是学生在完成学业时提交的研究成果。...特点:研究深入,常包含详尽的研究方法和数据,对某一特定课题的研究十分透彻。 示例:例如中国知网的学位论文库。 如何使用:通过大学图书馆、学位论文数据库等渠道获取。 3....如何使用:通过会议官方网站、专业数据库检索。 4. 技术报告 定义:由机构或企业发布的研究报告,往往用于解决特定的技术问题。...如何使用:通过机构图书馆、官方出版物获取。 5. 书籍与章节 定义:书籍为某一主题或学术领域提供全面、系统的介绍。 特点:适合对某一领域进行全面了解,内容广泛,涵盖基础知识和进阶内容。...文献分类与整理 按主题分类:根据研究主题,将文献按不同研究重点或子领域进行分类。 按方法分类:例如定量研究、定性研究或实验研究等,以便区分研究方法的差异。

    48410

    如何查一个期刊是不是EI检索

    每篇文章都会经过评估和分类,并使用EI Thesaurus标准化主题词,使用户可以快速准确地搜索和找到相关文献。 4、问:EI数据库与其他学术数据库有何不同之处?...8、问:如何使用EI数据库进行文献检索? 解答:使用EI数据库进行文献检索可以通过关键词、作者、文章标题、期刊名称、出版日期等信息进行检索。...EI数据库还提供高级检索功能,可以进一步缩小搜索范围,如通过主题词、作者机构、出版物类型等进行检索。 9、问:EI数据库的引用数据是否被广泛使用?...它们收录了来自全球多个专利机构的专利文献,并使用EI Thesaurus标准化主题词,使用户可以更容易地搜索和找到相关专利。 13、问:如何访问EI数据库?...32、问:如何利用EI数据库检索特定会议的论文? 解答:要在EI数据库中检索特定会议的论文,可以使用会议的名称作为关键词进行检索。

    6K10

    【选刊神器】如何找到适合投稿的目标期刊?选刊从此变得轻松又高效

    不论处在科研级别的哪个阶段,青铜或王者,每当投稿的时候,是否或多或少会遇过这个问题?我实验做完了,文章也写好了,就差临门一脚---投稿,然而这一脚却不知踹向何处?...提供4种检索模式:Paper Match (文章匹配), Journal Name (期刊名称), Publisher (出版商) 和Category (分类)。...SNIP旨在从篇均引文数的角度减少不同主题领域期刊的引用行为的差异,从而试图对不同主题领域的来源期刊进行直接比较,以此可以突破传统影响因子(JCR)无法考量不同研究领域的引用情形。...同样的,我们看到了一个系统匹配的期刊列表,期刊介绍主要包括:匹配度评分(Score)、出版商、影响力(Impact,注意这里不是影响因子IF,而是SNIP)、发表速度、是否OA。...依然通过输入摘要或者关键词进行检索;然后按照高级检索选项,限制条件包括IF、属于SCI/SCI-E,是否OA、出版周期(半月刊、月刊、年刊)等,选出自己心仪又符合文章主题的投稿期刊。

    21.7K40

    投稿再也不用烦恼,博主已经给你们整理好了!(AICV等领域)

    会议列表如下,大家可根据研究方向直接下滑至具体会议,查看会议详情。...征稿主题 包括但不仅限于以下主题: 1)机器学习 机器学习方法、学习与自适应控制、识别和感知的学习/适应、手写识别的学习、图像预处理与分割中的学习、过程自动化学习、学习适当的行为、动作模式的学习、学习机器人...会议特色 1.EI、Scopus双检索,检索时间稳定在会后3-6个月。 ...2.支持作者以组建workshop形式投稿  3.大会与EI和SCI期刊深度合作,可推荐优秀workshop稿件至EI或SCI期刊 征稿主题 征稿范围包括但不仅限于以下主题: 5G通讯、6G通讯、物联网...本次会议所录用论文将提交EI、Scopus核心索引,往届已在ACM出版见刊,EI检索。

    2.5K20

    01.红楼梦主题演化分析——文献可视化分析软件CiteSpace入门

    常用于文本主题挖掘、文本演化分析、知识发现等领域 CiteSpace软件基于共引分析和寻径网络算法等对数据样本进行可视化处理,呈现特定知识领域的演化过程。...二.中国知网下载文献数据集 第一步,打开中国知网搜索对应的主题,比如“红楼梦 红学”,读者可以尝试高级搜索对应时间或所需文献。此时共搜索3089篇期刊文献,然后依次“全选”按钮选中所需文献。...《红楼梦》文献主题演化分析 1.聚类分析 在关键词聚类图谱的基础上可以进一步进行聚类分析,点击如下图所示图标,输入“K”,即可对关键词进行自动聚类。...此外,有四类聚类方式,从左到右依次为:一减聚类(自动布局和风格)、根据Title标题聚类、根据KeyWords关键词聚类、根据Author作者聚类、KTA全部聚类(标题|关键词|作者)。...输出聚类结果如下图所示: 注意:更多设置请读者自行研究(如聚类数量设置),本文主要以入门普及为主。 2.主题演化分析 增加TimeLine时间轴即可显示对应的主题。

    2.3K11

    2亿篇论文免费看!「微软学术」停用,OpenAlex要接班

    创始人表示,该索引对出版物来源、作者信息和研究主题进行编目,旨在绘制这些数据点之间的联系,以创建一个全面的、相互关联的全球研究系统数据库。...今年1月3日推出的这个免费学术索引数据库,功能上与微软的Academic Graph (MAG) 类似,MAG 是Scopus、Dimensions 和 Web of Science 等学术订阅平台的免费替代品...目前,通过API可以获取单一实体、实体列表和实体组。 OpenAlex数据集描述了5类学术实体以及这些实际之间的联系。...每类实体分别对应其目标: 成果:包括论文、书籍、数据集等,会引用其他成果 作者:做出成果的人 出处:刊载成果的期刊或资源库 机构:(通过作者)与成果相关的大学或其他组织 概念:以话题方式对成果进行标签...现在,欧弗顿只使用OpenAlex,寄希望于检索过程更加便捷,简单设置让人容易学会。 「我只需要20分钟就会使用OpenAlex,而对比MAG却要3-4天。」阿迪说。

    95220

    AI时代文献综述高效写作指南:从筛选到合规的全流程技术赋能

    1.关键词策略:从“单一匹配”到“语义延伸”常规关键词检索(如仅用“人工智能伦理”)会错过“机器道德决策”“AI权利边界”等相关主题文献。...实操技巧:使用支持“核心文献拓展”的工具(如PaperRed、aibiye)时,上传3-5篇初步筛选的高被引文献,系统会基于参考文献与被引文献推荐同主题成果。...1.主题聚类:自动整合分散观点将筛选后的文献导入具备“主题聚类”功能的工具后,系统会基于NLP技术整合观点。...其中PaperRed的“锚点关联”功能更便捷,正文标注与文献列表实时同步;Zotero则在开源社区支持上更完善,适合习惯自定义格式的用户;aibiye仅支持英文期刊格式,中文规范覆盖不足,需谨慎选择。...无论使用哪类工具,优化核心始终是“注入原创见解”,将工具整合的观点与自身研究经验结合,才能保障综述的学术价值。

    88410
    领券