Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >新加坡:打造成全球数据管理中心

新加坡:打造成全球数据管理中心

作者头像
大数据文摘
发布于 2018-05-22 03:07:30
发布于 2018-05-22 03:07:30
2K0
举报
文章被收录于专栏:大数据文摘大数据文摘

【大数据国家档案】

国名:新加坡

数据开放计划:data.gov.sg、《个人资料保护法》

大数据国家战略:发布智慧国家2015年(iN2015)

发布时间:2006年推出

主导机构:资讯通信发展管理局(IDA)

核心内容:从大数据基础设施、政府服务、人才培养、技术研发和立法角度,推动大数据生态的完善,以及在企业应用和政府服务中的落地

涉及部门:资讯通信发展管理局(IDA)、土地管理局、人力部、教育部、交通管理局、卫生部等

新加坡和韩国类似,都具备全球顶级的宽带网络、数据中心基础设施条件,另外政府对信息产业很重视,各种应用的开展也相对较块。新加坡资讯通信发展管理局(IDA) 2006年就发布“智慧国家2015年(iN2015)”计划,希望将新加坡建设成一个以资讯通信驱动的智能化国度和全球化的都市。最近,新加坡政府又对提出支持新加坡企业采用大数据技术,利用大数据提升政府服务水平。要做到这点,新加坡资讯通信发展管理局产业集群组高级总监Tan EngPheng认为,将会涉及到三个方面:首先是刺激需求方,其次要通过吸引领先的供应商来加强供应方的实力,以及建设必要的基础设施来支持生态系统。

基础设施方面

新加坡是世界网速最快的国家之一,也是全球十大高速网络架构之一,承载了东南亚地区半数以上的第三方数据中心储存量。另外,作为全球数据管理枢纽的地位,新加坡汇集了东南亚超过50%的商业数据托管及中立运营商数据中心。据媒体报道,新加坡还计划建立一个占地面积超过12公顷的数据中心园,以吸引世界级的互联网及媒体公司在新加坡发展其内容及服务。众多国际IT巨头如谷歌、Paypal等都在新加坡建立自己的数据中心。

政府服务方面

新加坡电子政府采取的是“市民、企业、政府”合作的模式,市民和企业可以全天候访问1600项便利的政府在线服务。市民只需牢记一个密码:新加坡通行证(SingPass),即可享受相关电子政府服务,如便捷地在网上查询交通出行信息,办理住房申请和税务申报等。企业组织也拥有统一的与各政府机构进行互动的唯一身份识别码(UEN)。企业可以在线办理商务许可服务,工作许可服务,还能通过电子商务中心查询和参与政府招标与采购项目。

数据公开方面

data.gov.sg是新加坡政府分享公开数据的平台,2011年6月启用,目前开放了来自60多个公共机构的8600个数据集,其中50%的数据是可机读的。其中,OneMap是一个地理空间数据共享平台,目前有60种不同的地图主题。利用这些开放数据企业和部门已经开发了100多项应用,涉及停车信息、公共厕所、野猫管理等。2013年8月中旬,新加坡政府宣布将在2013年底之前开放更多数据,并使得数据支持OneMap平台的机读要求,以促进社会创新与协作。2012年,新加坡政府还公布了《个人资料保护法》(PDPA),旨在防范对国内数据以及源于境外的个人资料的滥用行为。新加坡政府积极推进数据公开,新加坡土地管理局(Singapore Land Authority)为基于位置的服务(LBS)的企业提供了开放数据平台,新加坡陆路交通管理局通开放交通数据,鼓励企业或个人开发提升公共交通效率的应用软件。

技术研发方面

EMC公司在新加坡设有大数据分析实验室,Dell、Intel和Revolution Analytics等企业也都在新加坡开设了大数据创新中心,提供针对亚洲市场的大数据和预测分析创新的解决方案开发支持。如今,新加坡信息通信研究院(I2R)与百度在东盟自然语言技术开发领域进行合作。新加坡高性能计算研究所(IHPC)通过对人们第一印象的建模研究,通过社会认知分析,帮助企业可以更好地了解亚洲消费者。

应用创新方面

2013年中起,一整套针对零售企业的商业分析共享服务将在新加坡逐步启动。2013年7月,IDA宣布将与三家横跨卫生保健、制造业以及广告媒体行业的全球企业发起“数据创新挑战”,并将以此为起点,陆续向其他领域推进。通过活动召集感兴趣的数据科学家、资讯通信技术企业以及学术研究机构,通过“众包”,提出创意和商业解决方案,以此改善流程,促进全球平台上的共同创新。新加坡人力部也宣布将推出的一个全新互动网站,提供新加坡劳动力市场相关的官方统计数据。雇主和雇员都可以使用该网站上的工具,把其所在组织的工资、雇佣条件及员工流动率等指标, 与全国或行业规范进行比较。

人才培养方面

新加坡同时鼓励大学设立数据挖掘和分析平台。2012年,新加坡管理大学(SMU)推出的“Livelabs”创新平台,旨在增强新加坡在消费者和社会行为领域的数据分析能力。新加坡国立大学也与IBM联合设立新国大商业分析中心(Centre for Business Analytics),旨在帮助企业加深对大数据的理解,并将其与行业经验紧密结合,以解决目前业务中所面临的挑战。新加坡政府计划在未来5年培养2500名数据分析专业人才,并已经在新加坡国立大学开设了相关专业的硕士班。

摘自《大数据中国》,鸣谢大数据实验室。

大数据实验室由资深大数据方向专业人士管理运营,致力于国内“大数据”领域投资,凡入选的初创企业将获得大数据实验室孵化基金提供的“种子资金”,将会有导师协助完善他们的商业模式,建立一个完整的核心团队,并进行初步的客户反馈和验证。感兴趣的创业团队或初创企业,可以通过以下方式与我们取得联系。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2014-02-09,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 大数据文摘 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
Kafka 负载均衡在 vivo 的落地实践
Kafka 客户端可以使用分区器依据消息的key计算分区,如果在发送消息时未指定key,则默认分区器会基于round robin算法为每条消息分配分区;
2020labs小助手
2022/06/06
8650
Kafka万亿级消息实战
本文主要总结当Kafka集群流量达到 万亿级记录/天或者十万亿级记录/天  甚至更高后,我们需要具备哪些能力才能保障集群高可用、高可靠、高性能、高吞吐、安全的运行。
2020labs小助手
2021/05/18
1.1K0
案例分享 | Yelp 如何在 Kubernetes 上运行 Kafka(第 2 部分 - 迁移)
上一篇文章,我们详细介绍了开发基于 PaaSTA 的新部署模型的架构和动机。现在想分享我们将现有 Kafka 集群从 EC2 无缝迁移到基于 Kubernetes 的内部计算平台的策略。为了帮助促进迁移,我们构建了与集群架构的各种组件接口的工具,以确保该过程是自动化的,并且不会影响用户读取或写入 Kafka 记录的能力。
灵雀云
2022/08/12
1.1K0
案例分享 | Yelp 如何在 Kubernetes 上运行 Kafka(第 2 部分 - 迁移)
Kafka在美团数据平台的实践
总第526篇 2022年 第043篇 Kafka在美团数据平台承担着统一的数据缓存和分发的角色,随着数据量的增长,集群规模的扩大,Kafka面临的挑战也愈发严峻。本文分享了美团Kafka面临的实际挑战,以及美团针对性的一些优化工作,希望能给从事相关开发工作的同学带来帮助或启发。 1. 现状和挑战 1.1 现状 1.2 挑战 2. 读写延迟优化 2.1 概览 2.2 应用层 2.3 系统层 2.4 混合层-SSD新缓存架构 3. 大规模集群管理优化 3.1 隔离策略 3.2 全链路监控 3.3 服务生命周期
美团技术团队
2022/08/26
7420
Kafka在美团数据平台的实践
Kafka监控工具汇总
对于大数据集群来说,监控功能是非常必要的,通过日志判断故障低效,我们需要完整的指标来帮我们管理Kafka集群。本文讨论Kafka的监控以及一些常用的第三方监控工具。
用户6070864
2019/08/27
2K0
Kafka监控工具汇总
FAQ系列之Kafka
“流媒体”:发布者(“生产者”)经常发送的大量消息(想想数万或数十万)。许多订阅者(“消费者”)经常进行消息轮询。
大数据杂货铺
2021/07/27
1.1K0
FAQ系列之Kafka
0891-CDP Private Cloud Base 7.1.8正式GA
八月再见,九月你好,今天是九月一日,新学年开始,Cloudera正式发布CDP Base 7.1.8和Cloudera Manager 7.7.1。这个版本引入了诸多新功能,比如通过EC提升Ozone的存储效率,Cloudera Manager的HA,多NameNode支持,全面支持Impala4.0,Hive性能提升,HDFS/Schema Registry血缘功能的增强,改进Ranger RMS,以及实时平台的全面增强。 1.平台支持增强 1.新的操作系统支持 CDP Private Cloud Ba
Fayson
2022/09/02
1.1K1
10 Confluent_Kafka权威指南 第十章:监控kafka
Apache Kafka有许多针对其操作的度量,这些度量指标非常多,会让人混淆哪些是重要的,哪些是可以忽略的。这些度量的范围从关于通信量总体速率的简单度量,到针对每种请求类型的详细时间度量,再到每个topic和每个分区的度量。他们提供了broker中的每个操作的详细视图,但也可能使你成为负责管理监视系统的人员的缺点。 本节将详细介绍一直要监控的最关键的度量标准,以及如何响应他们。我们还将描述一些再调试问题的时候需要账务的更重要的度量标准,然而,这并不是可用的度量标准的详细列表,因为列表经常发生变化,而且其中有许多只对硬编码的kafka开放人员有用。
冬天里的懒猫
2020/08/03
2.4K0
案例分享 | Yelp 如何在 Kubernetes 上运行 Kafka(第 1 部分 - 架构)
在 Yelp,Kafka 每天接收数百亿条消息来推进数据驱动并为关键业务管道和服务提供支持。我们最近通过在 PaaSTA (Yelp 自己的平台即服务)上运行集群,对 Kafka 部署架构进行一些改进。基于 K8s 的部署利用了 Kafka 的自定义 Kubernetes operator 以及用于生命周期管理的 Cruise Control 。
灵雀云
2022/08/12
6220
案例分享 | Yelp 如何在 Kubernetes 上运行 Kafka(第 1 部分 - 架构)
【夏之以寒-kafka专栏 01】 Kafka核心组件:从Broker到Streams 矩阵式构建实时数据流
Broker:在Kafka中,Broker是Kafka集群中的一个节点,负责处理Kafka中的核心功能。从物理层面来看,Broker可以是单独的一台服务器,也可以是集群中的一个节点。从逻辑层面来看,Broker是Kafka服务端的实现,负责接收生产者发送的消息,并将这些消息转发给消费者。Broker是Kafka实现分布式、高吞吐、高可靠性的关键组件。
夏之以寒
2024/05/26
3230
Kafka监控系统对比
github地址 : https://github.com/smartloli/kafka-eagle
用户5252199
2022/04/18
2K0
Kafka监控系统对比
如何更好地使用Kafka?
点个关注👆跟腾讯工程师学技术 引言| 要确保Kafka在使用过程中的稳定性,需要从kafka在业务中的使用周期进行依次保障。主要可以分为:事先预防(通过规范的使用、开发,预防问题产生)、运行时监控(保障集群稳定,出问题能及时发现)、故障时解决(有完整的应急预案)这三阶段。 事先预防 事先预防即通过规范的使用、开发,预防问题产生。主要包含集群/生产端/消费端的一些最佳实践、上线前测试以及一些针对紧急情况(如消息积压等)的临时开关功能。 Kafka调优原则: 1.确定优化目标,并且定量给出目标(Kafka
腾讯云开发者
2022/11/28
1.2K0
如何更好地使用Kafka?
使用Kafka Assistant监控Kafka关键指标
Kafka Assistant下载地址:http://www.redisant.cn/ka
用户3871926
2022/12/02
1.1K1
如何在CDH集群中部署Kafka Manager
为了能够方便的查看及管理Kafka集群,yahoo提供了一个基于Web的管理工具(Kafka-Manager)。这个工具可以方便的查看集群中Kafka的Topic的状态(分区、副本及消息量等),支持管理多个集群、重新分配Partition及创建Topic等功能。本篇文章Fayson主要介绍如何在CDH集群中部署Kafka-Manager并简单的介绍使用。
Fayson
2018/09/29
4.4K0
保姆级Kafka 降本实用指南
根据 Gartner 的预测,预计在 2021 年,全球终端用户在公共云服务上的支出将在 2020 年的 2700 亿美元基础上增长 23%,达到 3320 亿美元。
大数据老哥
2021/08/25
5120
保姆级Kafka 降本实用指南
Kafka的灵魂伴侣Logi-KafkaManger(3)之运维管控--集群列表
有想进滴滴LogI开源用户群的加我个人微信: jjdlmn_ 进群(备注:进群) 群里面主要交流 kakfa、es、agent、LogI-kafka-manager、等等相关技术; 群内有专人解答你的问题 对~ 相关技术领域的解答人员都有; 你问的问题都会得到回应
石臻臻的杂货铺[同名公众号]
2021/07/14
2860
Kafka系列之高频面试题
ISR是由Leader维护,Follower从Leader同步数据有一些延迟,超过配置的阈值会把Follower剔除出ISR,存入OSR列表,新加入的Follower也会先存放在OSR中。AR=ISR+OSR。
johnny666
2024/09/21
1720
Kafka最佳实践
要确保Kafka在使用过程中的稳定性,需要从kafka在业务中的使用周期进行依次保障。主要可以分为:事先预防(通过规范的使用、开发,预防问题产生)、运行时监控(保障集群稳定,出问题能及时发现)、故障时解决(有完整的应急预案)这三阶段。
星沉
2024/07/25
6800
Kafka最佳实践
读Kafka Consumer源码
这是OpenMessaging-Java项目GitHub上的一段介绍,大致是说OpenMessaging项目致力于建立MQ领域的标准。
林一
2018/07/24
9050
读Kafka Consumer源码
kafka中文文档
之前的版本:0.7.x,0.8.0,0.8.1.X,0.8.2.X,0.9.0.X,0.10.0.X。
gemron的空间
2019/11/04
15.6K0
kafka中文文档
相关推荐
Kafka 负载均衡在 vivo 的落地实践
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档