首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏hadoop学习笔记

    快DKH大数据网络爬虫安装教程(详细图文步骤)

    在线爬虫是快大数据一体化开发框架的重要组成部分,本篇重点分享在线爬虫的安装。 爬虫安装前准备工作:快大数据平台安装完成、zookeeper、redis、elasticsearch、mysql等组件安装启动成功。

    81130发布于 2018-08-24
  • 来自专栏大数据

    扩展大数据网络的规模

    原文地址:https://dzone.com/articles/scaling-big-data-fabrics 译者微博:@从流域到海域 译者博客:blog.csdn.net/solo95 扩展大数据网络的规模 实际上,网络的规模可能是扩展大数据网络最不感兴趣的方面。 大数据到底有多大? 不久之前,我问了一个问题:一个典型的大数据部署(指部署起来的应用,下同)有多大? 我期待着,正如我怀疑许多人的看法一样,标题中的“”意味着部署(起来)将会是一个大问题。但平均的大数据部署实际上比大多数人意识到的要小得多。 扩展大数据网络的真正问题不在于把小型互连规模扩大。网络并不会沿着单一应用程序的规模去扩展(或者至少它们不应该这样)。 现在当人们部署大数据应用时,的部分把人们指向有大量数据工作负载基于目的构建的体系结构。在很多情况下,这包括构建针对特定工作负载的分割的网络。

    95240发布于 2018-05-22
  • 来自专栏爱生活爱编程

    burp suite手机移动数据网络抓包

    增加 APN 并设置代理服务器 入口无线和网络–>移动网络–>接入点名称(APN)–>新建APN

    1.9K20发布于 2021-01-14
  • 来自专栏边缘计算

    什么是命名数据网络NDN?

    命名数据网络(Named Data Networking, NDN)经常出现在5G、边缘计算相关的文献书籍上,那NDN究竟是何方神圣?一起来了解一下吧! 研究人员先后提出了各种方案,其中命名数据网络(Named Data Networking, NDN)将内容本身看作网络中的主导实体,采取基于内容的架构颠覆了当前基于主机的网络架构,因而成为未来未来研究中一个具有代表性的网络架构 基于NDN架构的5G选择策略研究述.北京交通大学,2016. [2]张君菲.基于层次分析法的 NDN 缓存策略.网络天地,2019. [3]陈昱彤,刘开华,李卓,等.基于命名数据网络的5G架构网络层研究

    2K30发布于 2019-11-28
  • 来自专栏SDNLAB

    软件定义网络SDN从数据网络向光网络延伸

    目前业界掀起了融合信息技术(IT)和网络新型架构理念的研究势头,软件定义网络(SDN)技术迅速从数据网络领域向光网络领域延伸,以构建更灵活、高效、低成本、开放的未来光网络。 第一,网络流量快速增长,网络扩容压力;第二,网络智能化水平不高,运维管理复杂;第三,跨层域管控难度,无法适应网络融合发展的趋势;第四,网络相对封闭,新业务开发慢,难以满足应用创新需求。 与数据网络不同,光网络自身具有集中化管理和面向连接的交换机制等特点,因此光网络天然具有部分SDN的特征,更易于向SDN方向发展演进。 软件定义光网络架构包含控制、转发和应用三个层面。 ——多种接口协议并存,标准化难度。目前,光网络控制器南向接口存在Openflow、GMPLS/PCEP、网管协议等多种协议选择。随着层次化控制结构的引入,控制器层间接口将成为标准化重点。

    1.4K70发布于 2018-04-04
  • 来自专栏新智元

    ICCV 2019,华为诺亚提出无需数据网络压缩技术

    华为诺亚方舟实验室联合北京大学和悉尼大学发布论文《DAFL:Data-Free Learning of Student Networks》,提出了在无数据情况下的网络蒸馏方法(DAFL),比之前的最好算法在 MNIST 上提升了 6 个百分点,并且使用 resnet18 在 CIFAR-10 和 100 上分别达到了 92% 和 74% 的准确率(无需训练数据),该论文已被 ICCV2019 接收。

    1.2K20发布于 2019-09-10
  • 来自专栏子母钟系统

    京准NTP时间同步服务:大数据网络的核心枢纽

    京准NTP时间同步服务:大数据网络的核心枢纽在智慧数据体系中,NTP 网络授时服务器如同大数据系统的 “指挥官”,通过统一时间基准、保障数据时序一致性,为整个系统的协同运行提供核心支撑。

    20010编辑于 2025-10-09
  • 来自专栏数据派THU

    【独家】DataVisor:基于Spark平台的智能大数据网络反欺诈(视频+PPT+课程精华笔记)

    互联网欺诈攻击主要有四趋势:多种欺诈行为、复杂的欺诈产业链、潜伏期变长和各种欺诈辅助工具。

    1.7K80发布于 2018-01-29
  • 来自专栏云计算D1net

    SaaS公司保持经久不衰的三竞争优势

    根据我的调查,SaaS公司保持经久不衰的三竞争优势分别为:网络效应,数据网络效应和生态系统的创建。 数据网络效应 附加数据的价值会随着时间的增加产生数据网络效应。 如果12个月后客户转向竞争对手,12个月机器学习的价值便会受到极大影响,这是一个相当的代价。 网络效应 网络效应存在于多种企业社交网络,不仅仅是针对某一种网络。电子邮件和聊天系统都有被替代的风险。 相反,数据网络效应指SaaS公司利用新型关系打造一个全新的网络,比如LinkedIn的招聘网络、Axial和Angellist的金融网络、Doximity的医生网络等。

    1.3K80发布于 2018-03-23
  • 来自专栏拓端tecdat

    R语言文本挖掘NASA数据网络分析,tf-idf和主题建模|附代码数据

    ---- ---- 本文选自《R语言文本挖掘NASA数据网络分析,tf-idf和主题建模》。

    53220编辑于 2022-11-01
  • 来自专栏Harmony学习之路

    HarmonyOS学习路之开发篇—网络与连接(网络管理)

    数据网络管理:指定数据网络传输,获取数据网络状态变更,数据网络状态查询。 流量统计:获取蜂窝网络、所有网卡、指定应用或指定网卡的数据流量统计值。 HTTP缓存:有效管理HTTP缓存,减少数据流量。 hasDefaultNet() 查询当前是否有默认可用的数据网络。 getDefaultNet() 获取当前默认的数据网络句柄。 setAppNet(NetHandle netHandle) 应用绑定该数据网络。 开发步骤 调用NetSpecifier.Builder()构建指定数据网络的实例。 调用NetManager.setupSpecificNet()建立数据网络,通过callback获取网络状态变化。 接口名 功能描述 getCellularRxBytes() 获取蜂窝数据网络的下行流量。 getCellularTxBytes() 获取蜂窝数据网络的上行流量。

    56720编辑于 2023-10-15
  • 来自专栏镁客网

    翼方健数刘硕:用「隐私计算」构建起数据网络,让AI释放数据价值 | 镁客·请讲

    从而促使隐私计算这个新技术,获得了可以商业化落地的条件和相当的市场空间。”

    72320编辑于 2022-02-10
  • 来自专栏Hadoop实操

    0001-CDH网络要求(Lenovo参考架构)

    1.组网配置 建议的Cloudera组网配置如下图,主要包含数据网络和管理网络。 [01.jpg] 2.数据网络 数据网络是用于数据访问的节点之间的私有集群数据互连,比如在集群内的节点之间移动数据,或者将数据导入到CDH集群。CDH集群通常会连接到企业内部的数据网络。 需要2个TOR交换机:一个是用作带外管理,一个是用于CDH的数据网络。节点的带外管理至少需要一个1GbE交换机。数据网络的交换机一般为10GbE,具体取决于工作负载。 数据网络可以配置为使用VLAN。 注:无论是工作节点还是管理节点,Cloudera都不支持multi-homing。 4.多机架的网络 以上谈到的数据网络的参考架构配置是由单个网络拓扑构成的。如果是多机架的架构,还需要一个联想RackSwitch G8316核心交换机。

    1.9K140发布于 2018-03-29
  • 来自专栏iPaaS

    ETLCloud:重新定义AI驱动的数据集成未来

    ETLCloud:重新定义AI驱动的数据集成未来引言:从数据管道到智能数据网络在过去十几年里,ETL 作为现代大数据的核心基础设施,帮助企业实现了从数据孤岛到数据资产的转化。 而如今,随着生成式人工智能和模型技术的兴起,数据工程再次站上了变革的十字路口——AI 不再是 ETL 的附属工具,而正在成为 ETL 体系的“重构引擎”。 我们不仅是在传统ETL工具的基础上叠加AI能力,而是从根本上重新定义数据集成的范式:从静态的线性管道架构,迈向动态、自适应的智能数据网络。超越传统:ETLCloud的AI原生架构1. 智能辅助构建(AI Assist)利用语言模型(LLM)对接业务意图:用户只需通过自然语言描述“我想从 CRM 中取客户数据,清洗后导入数仓”,系统即可自动生成 ETL 任务初稿。 当前阶段,ETLCloud 已接入AI模型能力,已初步实现了流程级别的自然语言编排。2.

    23210编辑于 2025-05-30
  • 来自专栏区块链领域

    李笑来口中的“区块链下一个机会”已经到来!

    区块链的下一个机会 中国比特币首富李笑来在某产品发布会上表示:区块链的下一个机会是可信设备、可信执行环境,没人能阻止这个趋势。 未来的智能硬件都将接入区块链技术,让每个人成为大数据网络里的一个节点,每个节点都能通过各种智能可信设备生成不同数据聚合,不同的数据则对接这个大数据网络里的其他服务商或运营商来产生不同的价值,而乐心智康宝 区块链+可信设备=美好未来 区块链技术领域可以说是一块诱人的蛋糕,从各行业巨头持续关注,甚至是纷纷选择投资开发中也可窥探一二。

    40640发布于 2018-07-23
  • 来自专栏网站漏洞修补

    企业网站被黑客修改了数据怎么处理

    好多企业网站遭遇黑客攻击,像黑客入侵在互联网只要有数据网络,就能使用数据网络远程操作目标的笔记本电脑、网络服务器、企业网站,从而任意地读取或篡改目标的重要数据,又又或者使用目标系统软件上的功能模块,比如对手机的麦克风开展监听 从理论上讲,黑客入侵依照站点的sql语句注入安全漏洞开展数据库攻击方式,又或者拿到了目标域名在服务商中的帐号密码,篡改DNS服务器去指向一个黑客制作好的页面,又又或者找到了目标的社交邮箱账号,登录邮箱后,对数据网络虚拟资产开展非授权的远程操作 企业网站安全检测能够 侧重点留意GetShell这一操作过程使用方式,还有GetShell成功之后的其他深入恶意攻击行为(为了增加成果,黑客入侵多半会依照Shell开展漏洞检测、审查窃取、横向移动攻击方式其它内部数据网络目标

    1.7K00发布于 2020-03-07
  • 来自专栏网站漏洞修复

    企业网站被黑客入侵了如何做好安全防护

    好多企业网站遭遇黑客攻击,像黑客入侵在互联网只要有数据网络,就能使用数据网络远程操作目标的笔记本电脑、网络服务器、企业网站,从而任意地读取或篡改目标的重要数据,又又或者使用目标系统软件上的功能模块,比如对手机的麦克风开展监听 从理论上讲,黑客入侵依照站点的sql语句注入安全漏洞开展数据库攻击方式,又或者拿到了目标域名在服务商中的帐号密码,篡改DNS服务器去指向一个黑客制作好的页面,又又或者找到了目标的社交邮箱账号,登录邮箱后,对数据网络虚拟资产开展非授权的远程操作 企业网站安全检测能够 侧重点留意GetShell这一操作过程使用方式,还有GetShell成功之后的其他深入恶意攻击行为(为了增加成果,黑客入侵多半会依照Shell开展漏洞检测、审查窃取、横向移动攻击方式其它内部数据网络目标

    1.3K10发布于 2020-03-19
  • 来自专栏SDNLAB

    英国将造首座全SDN城市

    英国宣布要打造第一座软体定义网络(SDN)的城市,建立起一个完全可程式化,涵盖全市范围的数据网络,未来可用于推动物联网、无人驾驶车、以及交通与能源管理等智慧城市应用。 ? 这几年间,软体定义网络(SDN)不只在不少企业资料中心内开始采用,就连电信服务商也跟进运用在新服务与应用的部署上,甚至,日前英国也宣布将要打造第一座SDN的城市,要建立起一个完全可程式化,涵盖全市范围的数据网络 Bristol Is Open执行董事Paul Wilson表示,在该城市内将采用基于OpenDaylight专案的SDN控制器,建立一个可涵盖全市区范围的数据网络,包括将部署于市区的光纤网络、4G LTE

    60970发布于 2018-04-04
  • 来自专栏数据派THU

    干货 | 下一代数据网:数据驱动的云网链一体化(附视频)

    现有的三核心技术云、网、链各自有一些缺点。 数据协议方面,有数据孤岛的问题,成本和灵活性的问题及数据确权和效率的问题,这是清华大学下一代数据网络试图解决的问题,最主要的方法是通过区块链技术的研究和产业化方面来做一些动作。 什么是这三块融为一体化,这是一个很大的野心。 我们能不能占一个万米的高空,看这三技术的关系呢?我们看到机器学习的AI,它得益于大数据,同时它又为大数据提供了一个得力的工具。 对于云计算来讲,的数据在需要计算力方面有一个弹性。当我需要算力的时候,我希望无穷;当我不需要算力的时候,手机的CPU是闲着的,所以这是计算力共享的问题。 下一代的数据网络,它可以支持高速、海量区块链吞吐。首先在广域里面部署一个服务,同时能够支持毫秒级、亚秒级的交易,能够实现规模化的区块链应用。为什么呢?

    99210发布于 2018-09-17
  • 来自专栏数据猿

    大数据24小时 | 创意信息拟8亿元推进大数据战略,我国首个工业大数据交易平台落户萧山

    数据网络服务商创意信息拟8亿元收购邦讯信息 用于强化大数据运营 电信级数据网络系统技术服务商创意信息近日宣布,将拟8亿人民币收购邦讯信息100%股权,据悉,邦讯信息是信息化运维管理服务商,主要为电信客户提供管理信息系统与技术方面的支持 ,此次合作,创意信息将利用双方在电信行业的优势,提升公司的综合实力,进而强化大数据运营,推进大数据、云计算战略 大数据热潮再升级,四川省将建大数据交易中心 在互联网快速发展的背景下,“大数据”俨然已经成为了国家的重要发展战略

    88180发布于 2018-04-19
领券