我是思聪-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

我是思聪

专栏成员

18

文章

39806

阅读量

16

订阅数

豆瓣电影数据分析

这篇报告是我转行数据分析后的第一篇报告，当时学完了Python，SQL，BI以为再做几个项目就能找工作了，事实上……分析思维、业务，这两者远比工具重要的多。一个多月后回过头来看，这篇报告虽然写得有模有样，但和数据分析报告还是有挺大差别的，主要原因在于：

2022-05-13

3.4K2

爱飞狗技术架构升级

云服务器 kubernetes 小程序微信

2018年爱飞狗第一个版本上线，运营到2019年中关闭。爬虫以及数据一直没有中断，只是不想去做产品维护了而已。2020年底，自己重新将这个产品定位为自己的一个技术实践的产物，作为一个试验田，实验新的想法、新的工具。好在云厂商大量的推出廉价的服务器资源，我购买了2台4核8G内存的云服务器，使得爱飞狗重新起航有了新的基础。

2021-01-18

7790

心路历程：爬虫实战——从数据到产品

爬虫 markdown 数据分析

经过近一年的辛苦创作、编辑、等待，本书终于出版了。这种感觉有点像是十月怀胎，但没有生育时候的痛苦，只有最后得到的欣喜。现在回忆起去年接到写书的邀请，然后到纠结，再到刚开始痛苦的写作，以及最后成稿后的释然，一切都觉得是一场人生的经历。我倒是认为写书的目的不是为了赚钱，写一本书给自己，总结自己的过往，将经验传播给他人，就可以了。

2020-05-08

6350

AWS Parameter Store经验总结

github https python git 开源

Parameter Store用来存储配置的信息还是蛮方便的，记录一下这方面的经验。

2020-04-30

1.6K0

拼音学习的一些尝试

https python 网络安全

儿子学习拼音一直比较吃力，一个原因是小时候很多音发音不准导致无法正确的读出音，例如q、x、b、p、g、d等这些音，经多方咨询后在成都市天使儿童医院语音纠正一段时间以后有较大的改善。第二个原因是自身上课注意力不集中，课后没有抓紧复习，家长没有施加太大的压力，最终导致拼音一塌糊涂，基本上注音练习错误率在60%以上。

2020-04-30

8300

AWS EKS metrics not working issue

AWS EKS metrics by default not installed and after installation, we can't get the metrics. The problem is caused by internal IP, so fixing the deployment.yaml by adding

2020-04-30

5390

国内机票历史价格数据库

大数据数据分析

该数据库包含从2017年1月1日至今，国内2千多条直飞航线的出发前90天内的历史价格信息，具有包含价格历史长、连续性高、密度高、价格数据准确等特点。数据来源于互联网公开可查询数据，可用于科研、价格预测、出行优化等各种领域。

2020-04-30

20.7K1

使用k3s减少k8s成本

爬虫 etcd kubernetes .net node.js

爱飞狗后台的数据爬虫以及数据服务器资源都部署在k8s上，使用rancher搭建。在不影响太多性能的情况下尽量选择最低配置的机器。对于内存不足的情况适当的使用交换文件代替（swap）。整个集群大致结构如下：

2020-04-30

2K0

从数据到产品——爱飞狗背后的故事

数据库数据结构 sql 爬虫小程序

这篇文章基于最近整理的一份演讲的Slide，由于报名太晚错过了截止日期，所以只好写成文章，一起来看看爱飞狗背后的一些故事。

2020-04-30

1.3K0

小心！我正在偷窥你的运营

api 小程序微信数据分析大数据

首先，问一个很简单的问题考考你——在上海，摩拜单车出行的高峰时段是什么？这个问题相对比较容易回答，根据普通人上下班的时段应该是早上七八点左右，下午六七点左右。恭喜，你答对了。

2020-04-30

5810

大数据看共享汽车——EVCard篇

去年2月份我做过共享单车的数据分析，也分析出一些有意思的点。从2017年10月1日开始，历时3个多月，我收集了EVCard和GoFun共享汽车的公开数据。下面整理成一个动态的报告，一起看一下共享汽车的现状。

2020-04-30

1.4K0

大数据看共享汽车——GoFun篇

去年2月份我做过共享单车的数据分析，也分析出一些有意思的点。从2017年10月1日开始，历时3个多月，我收集了GoFun和EVCard共享汽车的公开数据。下面整理成一个互动的报告（文后有链接及代码），一起看一下共享汽车的现状。

2020-04-30

1.4K4

单车地图v2版本发布

chrome 地图浏览器手机

在线实时查看共享单车的位置，方便进行研究，请查看体验：http://www.dancheditu.com/

2020-04-30

3830

共享单车爬虫演示代码

https python github 网络安全

运行前请联系微信bcdata获取token，内置的token为演示用，单车位置是真实的，ID是随机的。

2020-04-30

8870

共享单车数据爬虫

api chrome token 地图浏览器

在线实时查看共享单车的位置，并提供了API供调用，方便进行研究，请查看体验：http://www.dancheditu.com/

2020-04-30

1.2K0

摩拜单车爬虫源码及解析

api python tcp/ip 爬虫数据分析

前两篇文章分析了我为什么抓取摩拜单车的接口以及数据分析的结果，这篇文章中讲直接提供可运行的源代码供学习。

2020-04-30

7290

摩拜单车爬虫解析——找到API

api 安全 fiddler android 数据分析

在上一篇文章《摩拜单车非官方大数据分析》中提到了我在春节期间对摩拜单车的数据分析，在后面的系列文章中我将进一步的阐述我的爬虫是如何高效的爬到这些数据的。

2020-04-30

6190

摩拜单车非官方大数据分析

http 数据分析出行

趁着过年的清闲时光，我抓取了摩拜单车的数据并进行了大数据分析。以下数据分析自1月19日整日的数据，范围成都绕城区域以及至华阳附近（天府新区）内。成都的摩拜单车的整体情况如下：

2020-04-30

9500

没有更多了

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态