在《携程技术2018年度合集》中,一共70篇文章中,只有5篇是大数据的内容。其中有一篇,讲到了Alluxio的应用过程。
本文由携程技术中心投递,ID:ctriptech。作者:郁伟,携程技术中心风险控制部高级开发经理。2010加入携程,参与了携程结算平台、风控系统的开发,对系统架构、流式数据处理等有比较深入的研究。 原文链接:http://geek.csdn.net/news/detail/129231 携程作为国内OTA领头羊,每天都遭受着严酷的欺诈风险,个人银行卡被盗刷、账号被盗用、营销活动被恶意刷单、恶意抢占资源等。 目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步,经过五年的不断探索
作者简介 郁伟,携程技术中心风险控制部高级开发经理。2010加入携程,参与了携程结算平台、风控系统的开发,对系统架构、流式数据处理等有比较深入的研究。 *视频时长约1小时19分钟,请在WiFi环境下观看* 携程作为国内OTA领头羊,每天都遭受着严酷的欺诈风险,个人银行卡被盗刷、账号被盗用、营销活动被恶意刷单、恶意抢占资源等。 目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步,经过五年的不断探索与创新,已经可以有效覆盖事前、事中、事后各个环节。也从原来基于“简单规则+DB”,发展到
序言 2021年仍然是艰难的一年。反复的疫情和全球经济的不确定性,让几乎所有对旅游业不利的因素都在释放。但于变局中开新局,在危机中育新机,旅游业人带着穿越寒冬的信念,奋力前行。携程技术人则“深耕国内,心怀全球”,切身体会到反复疫情为用户出行带来的困难,我们重点提升服务效率,推动进一步化繁为简并提高灵活性,加强系统的自动化程度,加快对用户需求的响应。 移动端的跨端技术深入进一步赋能业务,React Native、Flutter、小程序等跨平台框架将动态化的能力最大化的支撑业务,带来业务迭代周期缩短、开发效率的
近日,携程旅游大数据服务平台连续通过三轮评审,成功入选工业和信息化部的“大数据优秀产品、服务和应用解决方案”。据了解,该平台聚合了携程集团多项旅游行业数据,对内服务集团各业务线、对外服务各地旅游企业、政府机关、中央部委、及央地媒体,成为国内最具影响力的旅游业大数据服务平台。 随着社会和经济的发展,旅游业已成长为世界经济中发展势头最强劲和规模最大的产业之一。据世界旅游业理事会预计,到2020年,全球国际旅游消费收入将达到2万亿美元。 然而,传统旅游业的诸多痛点也在制约着行业的发展壮大,如细分行业需要整体化运营
“大数据”作为当下最火热的IT行业词汇,在主流的数据处理工具当中Hadoop和Spark都被大家所熟悉。不过,目前基于内存计算的Spark适合各种迭代算法和交互式数据分析,能够提升大数据处理的实时性和
“携程在手,说走就走”,这句广告语有多深入人心?只要说出上半句,有一半以上的国人都能对出下半句。作为1999年成立的旅游平台,携程已然成为业内外公认的“顶流”,为人们的出行带来了很多便利,甚至引领着人们全新的旅行方式。
PPV课大数据 “大数据”作为当下最火热的IT行业词汇,在主流的数据处理工具当中Hadoop和Spark都被大家所熟悉。不过,目前基于内存计算的Spark适合各种迭代算法和交互式数据分析,能够提升大数
携程作为中国领先的综合性旅行服务公司,每天向超过2.5亿会员提供全方位的旅行服务。拥有海量的用户行为数据、订单数据、供应商操作数据和员工操作数据等。 云海是携程旗下的大数据算法竞赛平台,旨在发掘和培养优秀的大数据人才,以“众创、众智、众包”的新模式,共同探索大数据机器学习的无限潜能。 云海大数据算法竞赛是携程主办的顶级算法竞赛,通过开放数据让所有对机器学习感兴趣的人有机会应用算法来解决旅游行业的实际问题。 通过举办机器学习沙龙,云海希望聚集来自各地的数据科学爱好者,切磋技艺、合作交流、并成为好友,在沙龙讨论
2019年已悄然来到我们身边,回首过去的2018年,携程GMV达到6900亿元,首次成为全球OTA行业第一;线下门店超7000家,国内城市覆盖率达到80%;海外平台月度活跃用户量已达到9000万,携程全品牌月活跃用户数超过2亿。
回首过去的2015,携程技术人用自己勤恳进取的态度,积极创新的精神为携程不断创造价值。1月31日携程技术中心年会上,CTO叶亚明先生(Eric)与大家一同见证了年度Top10的诞生。 No. 10
最近打开携程App预定机票,选中机票进入订单确认页面后,发现部分附加增值产品,如接送机优惠券被勾选,虽然在下方的费用明细栏有清晰的说明,但还是让人意外。在去年国庆期间,OTA平台因为搭售问题被舆论炮轰,携程率先推出了无默认搭售的“干净机票预订”产品,此后被各大OTA平台跟进,纷纷推出无默认搭售的机票预订服务。 监管部门对于搭售行为的规范也日益清晰。2017年8月9日,民航局发布的《关于规范互联网机票销售行为的通知》规定,在销售机票时不得以默认选项的方式“搭售”机票以外的服务产品。近日,中国民航局公布
李小林,携程技术副总裁,平台研发中心负责人。从事IT互联网技术研发工作二十多年,目前负责携程基础设施平台。本文来自李小林在“2018携程技术峰会”上的分享。
七夕大数据 ①七夕情侣约会最爱吃自助,最爱点的菜是三文鱼; ②最热礼物是鲜花,购买主力为18-29岁的年轻人,巧克力和美妆的销量也大幅上升; ③七夕约会,高铁牵线!近日,往返于各城市的年轻人同比增幅七
网申情况介绍 春招实习生网申一般在4月初开始,上一篇面经主要是聊了很多自己的看法之类的,这一次面经就写自己的其他面试的经过以及面试题吧 笔试介绍 笔试的话,携程、去哪儿的笔试题还是比较友好的,没有很多行测题,选择题也是考验一个行业术语解释,题量还可以,主观题比较多,不过主观题也比较适合PM答。 小米笔试题是邮件发过去的,一个是做一个音乐软件的竞品分析,另一个附加题是画一个原型图 面试问题 携程 携程的问题就是深挖简历,携程大多数事业群只有一面,那一面也不是很难,个人感觉还是比较水一些,不过也是看面试官
互联网正经历着史上最剧烈的『板块运动』,在资本力量的驱动之下,不同大陆正在合并、联合。10月26日,这一运动来到了旅游业:携程和去哪儿达成换股协议,在线旅游行业由此进入稳定格局,携程去哪儿联合体70%-80%的市场份额意味着其成为OTA寡头。这一资本大事件,对于行业格局、公司战略的影响,在第一时间已经不少解读。不过对业务层面的观察,还不多。 百度已有两名高层进入携程董事会,因此未来携程系业务与百度诸多与OTA有关系的业务将产生更多联系,例如百度地图、百度钱包、百度糯米、Uber等出行服务、百度搜索、大数据
本文作者为携程大数据平台负责人张翼。张翼浙江大学硕士毕业,2015年初加入携程,主导了携程实时数据计算平台的建设,以及携程大数据平台整合和平台技术的演进。进入互联网行业近10年,从事大数据平台和架构的工作超过6年。
“疾风知劲草,烈火见真金。”2023年,是我们的挑战之年,也是我们的成长之年。全球旅游行业在经历了三年疫情的严重打击后,终于迎来了全面的复苏和爆发式的增长。我们多个业务线订单量均突破了历史最高值,随着五一、暑期、十一、春运多个业务高峰接踵而至,我们系统承受了前所未有之压力,面对压力,我们没有退缩,而是选择了挑战。我们进行了一系列的技术改进和创新,提升了系统的效率、可扩展性、稳定性和安全性,同时降低了成本,强有力地保障了业务的发展。
作者简介 刘江,携程金融管理部风险管理总监,负责携程集团的全面风险管理工作。拥有近15年风险管理经验,先后在广发银行、OperaSolutions、阿里巴巴和腾讯等公司任重要管理岗位,一直从事风控政策、风控模型、大数据征信等相关工作。 携程反欺诈体系经过超过10年的发展和积累,在大数据实时并行计算和实时多维关联分析方面已经非常成熟,是整个体系稳定高效运行的基础。 近两年来,我们在大数据和人工智能方向投入研发资源,产出了设备指纹、CDNA、实时复杂变量计算引擎等一系列创新项目,取得到很好的应用效果。2017年
继去年爆出了“酒店同房不同价”的消息之后,前两天微博网友@陈利人 发文称,在携程订票未支付时,发现忘记勾选“报销凭证”,退回修正再支付时被提醒“已无票”。重新搜索该票,价格贵了近1500元。
专访携程商旅邱斐:博弈中的大猪如何利用数据驱动业务?
近日,第二届“中国商标金奖”评选结果公示揭晓,携程旅行网作为唯一一家在线旅游服务企业入选“商标创新奖”,提供优质服务是携程深耕旅游业16年来始终不曾改变的宗旨,也是被众多用户认可的原因所在。据了解,日
近期工作需要,需要从成千上万封邮件中搜索一些关键字并返回对应的邮件内容,经调研我选择了Elastic Search。
作者简介 张巍,携程技术中心大数据资深研发工程师。2017年加入携程,在大数据平台部门从事基础框架的研发和运维,目前主要负责 Presto,Kylin,StructedStreaming 等大数据组建的运维,优化,设计及调研工作。对资源调度,OLAP引擎,存储引擎等大数据模块有浓厚的兴趣, 对 hdfs,yarn,presto,kylin,carbondata 等大数据组建有相关优化和改造经验。 一、背景介绍 携程作为中国在线旅游的龙头,提供酒店,机票,度假等服务,这些服务的背后是基于各个部门每天对海量数
摘要: 京津冀大数据创新应用中心18日将正式投入运营;腾讯云与贵阳国家高新区合作,推动云计算、大数据发展;美国人工智能预测判案结果准确率超70% 比专家准。 政府动态 京津冀大数据创新应用中心18日将正式投入运营 日前,坐落于廊坊市润泽国际信息港的京津冀大数据创新应用中心主体工程竣工。该中心将在5月18日的2017中国·廊坊国际经济贸易洽谈会举行时正式投入运营。京津冀大数据创新应用中心总占地面积10.6万平方米,建筑面积33万平方米,项目投资15亿元,建成后将包含体验中心、研发中心、双创中心、应用中心、感知
📷 敏捷总动员是携程的敏捷之旅,致力于为广大敏捷爱好者提供高效、有趣的敏捷开发学习途径,在上海技术圈子内推广敏捷开发思想和实践,帮助企业更好地实施敏捷。 此次敏捷总动员将带您亲历敏捷三生三世的美好,领略极致畅爽的敏捷之旅,让您在工作中游刃有余自由切换。 想结交满满正能量,有激情的朋友吗?快快加入“敏捷总动员”吧,跟我们一起变得爱学习而有思想,变得懂生活而有目标,变得要行动而有结果,成为一个快乐、高效、平衡的人。 活动信息 ---- 【时间】6月9日(周六)13:00-17:30 【
作者简介 周振伟,携程数据智能部数据科学工程师,同济大学硕士,主要承担酒店服务领域的数据分析和挖掘工作。 无论是出门旅游还是商务出行,在外能有一个舒适的住处,往往都是首先要解决的问题。OTA提供的酒店预订功能无疑为此提供了巨大的便利。 打开携程APP,看中一家不错的酒店下单后,会有一个等待酒店确认的过程。携程将用户预订的消息发送给酒店,酒店进行查房,确认是否有空余房间,然后回复携程,再由携程通知用户确认结果。这个过程通常在半小时到一小时内完成,很多时候只需十分钟,在这背后,携程的呼叫中心起到了重要的作用。
互联网二次革命的移动互联网时代,如何吸引用户、留住用户并深入挖掘用户价值,在激烈的竞争中脱颖而出,是各大电商的重要课题。通过各类大数据对用户进行研究,以数据驱动产品是解决这个课题的主要手段,携程的大数据团队也由此应运而生;经过几年的努力,大数据的相关技术为业务带来了惊人的提升与帮助。 以基础大数据的用户意图服务为例,通过将广告和栏位的“千人一面”变为“千人千面”,在提升用户便捷性,可用性,降低费力度的同时,其转化率也得到了数倍的提升,体现了大数据服务的真正价值。 在新形势下,传统应用架构不得不变为大数据及新
作者简介 郭建华,携程技术中心软件研发工程师,2016年加入携程,在大数据平台部门从事基础框架的研究与运维,主要负责HDFS、Alluxio等离线平台的研发运维工作。 进入大数据时代,实时作业有着越来越重要的地位,并且部分实时和离线作业存在数据共享。实践中使用统一的资源调度平台能够减少运维工作,但同时也会带来一些问题。 本文将介绍携程大数据平台是如何引入Alluxio来解决HDFS停机维护影响实时作业的问题,并在保证实时作业不中断的同时,减少对HDFSNameNode的压力,以及加快部分Spark SQL作
“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。
全球AI技术开放日,是由AICamp发起的学习和练习AI技术的一系列交流学习活动。组织国内外AI专家学者走进优秀的AI技术公司,一起交流学习AI技术具体实践。 7月14日走进携程专场,将探索携程在线旅游业务背后的AI大脑。由来自硅谷和携程的讲师围绕相关业务发展过程中遇到的问题和解决方案展开,从技术挑战与选型、架构设计与阶段性演进、新技术应用探索等多个层面进行分享。 活动信息 ---- 【时间】7月14日(周六)12:30-17:00 【地点】上海市长宁区金钟路968号,凌空SOHO12号楼 【报名】点击文
场主认为:Flink=风口趋势所在!而技术人就是追风的人,stay hungry,stay young!
用户画像作为“大数据”的核心组成部分,在众多互联网公司中一直有其独特的地位。 作为国内旅游OTA的领头羊,携程也有着完善的用户画像平台体系。目前用户画像广泛用于个性化推荐,猜你喜欢等;针对旅游市场,携程更将其应用于“房型排序”“机票排序”“客服投诉”等诸多特色领域。本文将从目的,架构、组成等几方面,带你了解携程在该领域的实践。 1.携程为什么做用户画像 首先,先分享一下携程用户画像的初衷。一般来说,推荐算法基于两个原理“根据人的喜好推荐对应的产品”“推荐和目标客人特征相似客人喜好的产品”。而这两条都离不开用
这是我们第一次尝试把携程技术的相关文章整理成册,分享给技术圈的小伙伴们。 作为一家在上海的互联网企业,我们一直希望能营造起技术圈,尤其是上海技术圈的交流氛围,让小伙伴们有一个更好的沟通平台。 《携程技术2017年度合辑》这本小书,内容来自携程技术中心微信公众号在2017年发布的文章,共66篇,25万多字。包含了架构、大数据、前端、安全、运维、云计算、数据库等领域,也包含了2017年八场携程技术沙龙上的干货内容。 这些文字背后,是携程近3000位技术人的支持,他们在日常繁忙的工作之余,将自己在一线中的实践经
过去一周,国际、国内的大数据相关公司都有哪些值得关注的新闻?数据行业都有哪些新观点和新鲜事?DT君为你盘点解读。
还有几个小时,315晚会就开始了,估计已经有一部分公司做好了预防自己中招的准备,公关团队+舆情监控系统蓄势待发,密切关注着315的一举一动,一旦有“万一”,第一时间做好公关工作,尽可能降低负面影响。 今年315晚会的主题是“品质消费,美好生活”,唤醒消费者权益意识,规范市场秩序依然是不变的宗旨。互联网已经深入人们的日常生活,与之相关的安全信息领域也逐渐成为315晚会重点关注对象。2017年的315晚会上,互动百科虚假广告、科视公司收集学生信息以及不安全的密码等消费预警。由此也可以发现,普通消费者对于个人隐私
作者简介 张振华,携程旅行网机票研发部资深软件工程师,目前主要负责携程机票大数据基础平台的建设、运维、迭代,以及基于此的实时和非实时应用解决方案研发。 携程机票实时数据种类繁多,体量可观,主要包括携程机票用户访问、搜索、下单等行为日志数据;各种服务调用与被调用产生的请求响应数据;机票服务从外部系统(如GDS)获取的机票产品及实时状态数据等等。这些实时数据可以精确反映用户与系统交互时每个服务模块的状态,完整刻画用户浏览操作轨迹,对生产问题排查、异常侦测、用户行为分析等方面至关重要。 回到数据本身,当我们处理数
<数据猿导读> 寒假将至,加之过年七天小长假,又到了旅游的旺季。不少朋友应该已经为假期出游做好了准备,今天携程旅游网发布了最新的最新旅游大数据,亲子游市场的热潮看来不会退散 新春佳节临近,除了与家人团
随着技术迭代的不断加速,大数据极大改变了行业领域对信息流动的限制。本期封面报道聚焦领域内热门技术与应用实践,带领大家深度解析大数据技术难点和发展趋势。厉兵秣马今点将,群雄逐鹿正当时——本期精彩不容错过。 探讨数据时代构建高可用数据库的新技术(崔秋,PingCAP联合创始人) 使用Marathon管理Spark 2.0.2实现运行运行期扩容的executor调度(李雪岩,徐磊,吕晓旭) 解析阿里云分布式调度系统伏羲(陶阳宇,花名举水,阿里云高级技术专家) 大数据引擎Greenplum那些事(周雷皓,百度外卖大
10月19日,携程上海总部,来自华为、网易、携程等行业内深耕多年的资深专家和实战派人物,与250余位参会者一起,聚焦测试工程效率提升,围绕AI、自动化平台、DEVOPS等多个前沿议题进行探讨。
Guest Video 温馨提示 本视频时长33分59秒,建议在wifi下观看 机器学习是一门让计算机在非精确编程下进行活动的科学,计算机科学家认为机器学习是人工智能研究的核心内容,统计学家认为机器学
Spark是一种快速、通用、可扩展的大数据分析引擎,2009年诞生于加州大学伯克利分校AMPLab,2010年开源,2013年6月成为Apache孵化项目,2014年2月成为Apache顶级项目。目前,Spark生态系统已经发展成为一个包含多个子项目的集合,其中包含SparkSQL、Spark Streaming、GraphX、MLlib等子项目,Spark是基于内存计算的大数据并行计算框架。Spark基于内存计算,提高了在大数据环境下数据处理的实时性,同时保证了高容错性和高可伸缩性,允许用户将Spark部署在大量廉价硬件之上,形成集群。Spark得到了众多大数据公司的支持,这些公司包括Hortonworks、IBM、Intel、Cloudera、MapR、Pivotal、百度、阿里、腾讯、京东、携程、优酷土豆。当前百度的Spark已应用于凤巢、大搜索、直达号、百度大数据等业务;阿里利用GraphX构建了大规模的图计算和图挖掘系统,实现了很多生产系统的推荐算法;腾讯Spark集群达到8000台的规模,是当前已知的世界上最大的Spark集群。
国内在线旅游企业的科技感越来越浓。上周,携程旅行网在上海密集展示了一系列新科技成果。近日,携程科研团队撰写的深度学习主题的论文成果,又被大洋彼岸的顶级学术会议AAAI(美国人工智能协会)录用。这也意味着,携程在人工智能+旅游细分领域的研究达到国际前沿水平。 AAAI是国际人工智能领域的顶级学术会议,其论文代表当今人工智能技术研究的最高水准,它既是AI学术泰斗讨论和发布学术成果的主阵地,也是Google、微软等公司的AI知名项目成果论文的重要出版机构。如今,携程也正式迈入了AAAI顶级科技企业成员。 据悉
人民网北京9月24日电 (冯亚涛)中秋、“十一黄金周”即将到来,一大波游客正准备前往各地旅游。业内人士分析,黄金周旅游规模或创历史新高。根据各大在线旅行社的大数据分析,今年长假会出现两个出行高峰;丽江、三亚、北京、厦门等地预计为最受欢迎的国内旅游目的地。有出行计划的游客尽量提前预订门票,避峰出行。 双节将出现两个出行高峰 10月1日为峰值 携程旅行网的数据显示,今年黄金周旅游将呈现三大特点:约50%的游客选择拼假出游,最长休假16天;黄金周转战海外,出境游人数超国内游;中秋国庆档期相撞,今年长假罕见出现了两
对于如何对最近火热的TMT产业进行估值和分析的问题,在此推荐大家看看下面这则短文,该文由德克萨斯大学会计学博士 长江商学院会计学助理教授 张维宁 撰写。 首先,讨论一下互联网生态的问题,每天大家都看到很多关于互联网生态的观点和评论,我今天跟大家分享一些我所理解的互联网生态的内在逻辑。 以交易为核心▼ 首先,如何达成“交易”是整个生态的核心。换言之,所有的生态活动应该最终指向交易。2013年,这个观点争论挺大的,当时很多人都认为,互联网是流量为王,以流量为核心。但现在认可我这个观点的人越来越多了。 那么,哪
内容来源:2018 年 09 月 08 日,携程大数据平台技术总监张翼在“2018开源数据库论坛暨首届MariaDB中国用户者大会”进行《大数据平台在携程的实践》演讲分享。IT 大咖说(微信id:itdakashuo)作为独家视频合作方,经主办方和讲者审阅授权发布。
今年春节很多人选择外出旅行,依托携程大数据的帮助,一起来看看,今年春节旅行都有哪些特点。 一、为躲避亲戚的例行问候出行 “到春节了,一个个亲戚跑来问我啥时候结婚,我觉得会马上疯掉,我只能出去旅行了。”年近30岁却依旧单身的王小姐对此表示苦恼,而王小姐的遭遇同样也是不少单身80后选择在今年春节出行的重要原因之一。 据携程旅行网的数据显示,今天春节单身男女的出行人数较往年上涨3成有余,其中,7成左右为30岁左右的单身女性,在目的地方面,单身男女间也颇有共同点,谁敢说,这不是一场以全世界为主场的单身男
干货 | 携程在线风控系统架构 https://mp.weixin.qq.com/s?__biz=MjM5MDI3MjA5MQ==&mid=2697266522&idx=1&sn=6dc0bc0bb
1月20日,在公安部举办的2016年网络安全管理优秀团队和个人表彰会上,凭借技术过硬、24小时联动响应、开放创新等优势,携程信息安全部荣获2016年网络安全管理优秀团队称号。 携程信息安全团队负责人凌
领取专属 10元无门槛券
手把手带您无忧上云