LhWorld哥陪你聊算法-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

LhWorld哥陪你聊算法

欢迎大家微信公众号LHWorld 带你领略算法和大数据的魅力；主页地址：https://blog.csdn.net/LHWorldBlog

专栏成员

159

文章

256038

阅读量

42

订阅数

大白话5分钟带你走进人工智能-第36节神经网络之tensorflow的前世今生和DAG原理图解(4)

机器学习 keras 人工智能 python

Tensorflow由Google Brain谷歌大脑开源出来的，在2015年11月在GitHub上开源，2016年是正式版，2017年出了1.0版本，趋于稳定。谷歌希望让优秀的工具得到更多的去使用，所以它开源了，从整体上提高深度学习的效率。在Tensorflow没有出来之前，有很多做深度学习的框架，比如caffe，CNTK，Theano，公司里更多的用Tensorflow。caffe在图像识别领域也会用。Theano用的很少，Tensorflow就是基于Theano。中国的百度深度学习PaddlePaddle也比较好，因为微软、谷歌、百度它们都有一个搜索引擎，每天用户访问量非常大，可以拿到用户海量的数据，就可以来训练更多的模型。

LhWorld哥陪你聊算法

2019-08-23

1.2K0

大白话5分钟带你走进人工智能-第35节神经网络之sklearn中的MLP实战(3)

这样来导入神经网络这个模块，如果做分类，就是MLPClassifier，它和神经网络什么关系？它叫做多层感知机。这里是用它做分类的一个算法。

LhWorld哥陪你聊算法

2019-08-22

1.5K0

【Maven篇】---解决Maven线上部署java.lang.ClassNotFoundException和no main manifest attribute解决方法

maven 线上部署的话会出现一些问题比如java.lang.ClassNotFoundException或者no main manifest attribute的话，是因为maven 配置里面的问题，本文就这问题给出常用配置。

LhWorld哥陪你聊算法

2019-04-19

2.1K0

【Redis篇】Redis集群安装与初始

云数据库 Redis®ruby

前提是安装好redis具体可参考http://www.cnblogs.com/LHWorldBlog/p/8463269.html

LhWorld哥陪你聊算法

2019-02-25

5300

【Redis篇】初始Redis与Redis安装

云数据库 Redis®缓存

Redis是当前比较热门的NOSQL系统之一，它是一个key-value存储系统。和Memcache类似，但很大程度补偿了Memcache的不足，它支持存储的value类型相对更多，包括string、list、set、zset和hash。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作。在此基础上，Redis支持各种不同方式的排序。和Memcache一样，Redis数据都是缓存在计算机内存中，不同的是，Memcache只能将数据缓存到内存中，无法自动定期写入硬盘，这就表示，一断电或重启，内存清空，数据丢失。所以Memcache的应用场景适用于缓存无需持久化的数据。而Redis不同的是它会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件，实现数据的持久化。

LhWorld哥陪你聊算法

2019-02-25

1K0

Yarn篇--搭建yarn集群

yarn node.js bash bash 指令

<property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value>//定义yarn的机制 </property> <property> <name>yarn.resourcemanager.ha.enabled</name>//是否使用HA <value>true</value> </property> <property> <name>yarn.resourcemanager.cluster-id</name//集群Id <value>cluster1</value> </property> <property> <name>yarn.resourcemanager.ha.rm-ids</name>//集群逻辑节点 <value>rm1,rm2</value> </property> <property> <name>yarn.resourcemanager.hostname.rm1</name>//集群物理节点 <value>node03</value> </property> <property> <name>yarn.resourcemanager.hostname.rm2</name>//集群物理节点 <value>node04</value> </property> <property> <name>yarn.resourcemanager.zk-address</name>//与zookeeper通信 <value>node02:2181,node03:2181,node04:2181</value> </property>

LhWorld哥陪你聊算法

2019-02-25

2.4K0

【Azkaban搭建】---Azkaban 3.25.0搭建细则超实用

Azkaban是一个工作流调度工具，因为需要各个任务之间有依赖关系，传统的Crontab 任务已经不能满足。

LhWorld哥陪你聊算法

2018-12-05

1K0

【常见错误】--Nltk使用错误

AttributeError: module 'nltk' has no attribute 'word_tokenize'

LhWorld哥陪你聊算法

2018-10-09

2.8K0

Python可视化库Matplotlib的使用

一。导入数据 import pandas as pd unrate = pd.read_csv('unrate.csv') unrate['DATE'] = pd.to_datetime(unrate['DATE']) print(unrate.head(12)) 结果如下： DATE VALUE 0 1948-01-01 3.4 1 1948-02-01 3.8 2 1948-03-01 4.0 3 1948-04-01 3.9 4 1948-05-0

LhWorld哥陪你聊算法

2018-09-13

8260

Python爬虫知识点二

python 爬虫 json api http

一。request库 import json import requests from io import BytesIO #显示各种函数相当于api # print(dir(requests)) url = 'http://www.baidu.com' r = requests.get(url) print(r.text) print(r.status_code) print(r.encoding) 结果：二。BeautifulSoup库 html:举例如下 <html><head><titl

LhWorld哥陪你聊算法

2018-09-13

3140

Python爬虫知识点一

1.1.HTTP简介 HTTP = HyperText Transfer Protocol URI = Uniform Resource Identifier URL = Uniform Resource Locator URI和URL的区别：URI强调的是资源，而URL强调的是资源的位置。 1.2常用请求类型 OPTIONS: 返回服务器针对特定资源所支持的http请求方法。 HEAD: 向服务器索要与get请求相一致的响应，只不过响应体将不会被返回。 GET: 向特定资源发出请求 PUT: 向指定资源位置上传其最新内容 POST: 向指定资源提交数据进行处理请求 DELETE: 请求服务器删除指定URI所标识的资源 PATCH: 用来将局部修改应用于某一资源 1.3HTTP常见状态码 200/OK：请求成功 201/Created: 请求已被实现，且一个新资源已根据请求被建立，URI跟随Location头信息返回。 202/Accepted: 服务器已接受请求，但尚未处理。 400/Bad Request: 请求无法被服务器理解 401/Unauthorized: 当前请求需要用户验证 403/Forbidden: 服务器已理解请求，但拒绝执行。 404/Not Found

LhWorld哥陪你聊算法

2018-09-13

5950

从0到1搭建spark集群---企业集群搭建

spark hadoop http apache html

今天分享一篇从0到1搭建Spark集群的步骤，企业中大家亦可以参照次集群搭建自己的Spark集群。

LhWorld哥陪你聊算法

2018-09-13

2.2K0

hadoop集群篇--从0到1搭建hadoop集群

hadoop ssh java jdk xml

本来有套好好的集群，可是不知道为什么虚拟机镜像文件损坏，结果导致集群不能用。所以不得不重新搭套集群，借此机会顺便再重新搭套吧，顺便提醒一句大家，自己虚拟机的集群一定要及时做好快照，最好装完每个东西后记得拍摄快照。要不搞工具真的很浪费时间，时间一定要用在刀刃上。废话不多说，开始准备环境搭建，本集群搭建完全基于企业思想，所以生产集群亦可以参照此搭建。

LhWorld哥陪你聊算法

2018-09-13

1.4K0

Spark算子篇 --Spark算子之aggregateByKey详解

rdd.aggregateByKey(3, seqFunc, combFunc) 其中第一个函数是初始值

LhWorld哥陪你聊算法

2018-09-13

2.2K0

Hadoop源码篇---解读Mapprer源码outPut输出

上次讲完MapReduce的输入后，这次开始讲MapReduce的输出。注意MapReduce的原语很重要：

LhWorld哥陪你聊算法

2018-09-13

7060

Hadoop源码篇--Reduce篇

Reduce文件会从Mapper任务中拉取很多小文件，小文件内部有序，但是整体是没序的，Reduce会合并小文件，然后套个归并算法，变成一个整体有序的文件。

LhWorld哥陪你聊算法

2018-09-13

6730

【Spark篇】---Spark资源调度和任务调度

Spark的资源调度是个很重要的模块，只要搞懂原理，才能具体明白Spark是怎么执行的，所以尤其重要。

LhWorld哥陪你聊算法

2018-09-13

1.7K0

【Spark篇】---Spark中内存管理和Shuffle参数调优

spark jvm 存储大数据 ide

Spark执行应用程序时，Spark集群会启动Driver和Executor两种JVM进程，Driver负责创建SparkContext上下文，提交任务，task的分发等。Executor负责task的计算任务，并将结果返回给Driver。同时需要为需要持久化的RDD提供储存。Driver端的内存管理比较简单，这里所说的Spark内存管理针对Executor端的内存管理。

LhWorld哥陪你聊算法

2018-09-13

1.4K0

【Spark篇】---SparkSQL初始和创建DataFrame的几种方式

Hive是Shark的前身，Shark是SparkSQL的前身,SparkSQL产生的根本原因是其完全脱离了Hive的限制。

LhWorld哥陪你聊算法

2018-09-13

2.6K0

【强化学习篇】--强化学习案例详解一

转变为如下图：先构造奖励，达到5，即能够走得5的action则说明奖励比较高设置成100，没有达到5说明奖励比较低，设置成0。

LhWorld哥陪你聊算法

2018-09-13

1.2K0

点击加载更多

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态