炼数成金 大数据架构
订阅

架构

从滴滴出行业务中台实践聊聊如何构建大中台架构
从滴滴出行业务中台实践聊聊如何构建大中台架构
在创业初期,为了快速拥抱业务,架构的建设在体系化、完善度等方面会有所不足。随着时间的推移,架构在可持续性、稳定性等方面不断进步。2015 年末,滴滴出行在短时间内形成了包括快车、出租车、专车、顺风车、代驾 ...
单点登录怎么实现?
单点登录怎么实现?
假设一个场景:公司内部有财务、OA、订单服务等各类相互独立的应用系统,员工张三对这些系统有操作权限,如果张三想要登录某个系统进行业务操作,那么他需要输入相应的账号与密码。想象一下,当公司内部有 100 个应 ...
基础设施助力双11(七):软硬件深度优化,让存储IO如丝般顺滑
基础设施助力双11(七):软硬件深度优化,让存储IO如丝般顺滑
某业务在使用某型号搭配新型NVME SSD的服务器过程中发现IO抖动问题,IO抖动造成了业务抖动,严重影响业务性能稳定性。业务不仅关注NVME SSD本身的读写延时、IOPS,而且需要保证所有IO的延时、IOPS要保持稳定,不能剧 ...
基础设施助力双11(六):看网络如何“自愈”
基础设施助力双11(六):看网络如何“自愈”
目前每天的数据采集量接近万亿级的水平,采集的类型包括日志、SNMP采集(路由器交换机性能指标采集)、AliPing采集(内网质量采集)、AliInternet采集(互联网质量采集)、Netflow采集(流数据采集)等。网络设备跟 ...
阿里巴巴新一代自研SSD - AliFlash V2 上线支持业务
阿里巴巴新一代自研SSD - AliFlash V2 上线支持业务
作为阿里巴巴数据中心的重要组成部分, 存储系统承载着双11巨大的数据读写流量, 其性能、可靠性和稳定性对用户体验有着重要的影响。2017年的双11全球购物狂欢节,阿里巴巴新一代自研SSD - AliFlash V2在阿里巴巴数据 ...
基础设施助力双11(四):图片编码FPGA硬件优化
基础设施助力双11(四):图片编码FPGA硬件优化
目前互联网上的图片还是以JPEG格式为主,伴随新的图像视频编解码技术的发展,也产生了多种更高效的图片编解码算法,这些高效的图片编解码算法相比JPEG图片格式可以提升50%以上的压缩率。如果客户端对图片的请求采用 ...
基础设施助力双11(三):阿里智能流量调度(NetO)
基础设施助力双11(三):阿里智能流量调度(NetO)
阿里部署了互联网质量分析系统,实时监测互联网质量,为用户分配最近的阿里网络入口,让用户尽快连接到阿里提供的服务。此外,阿里持续大力增加与中小运营商的Peering合作,在用户热点地区增加阿里的服务点从而提升 ...
基础设施助力双11(二): 发挥异构计算硬件资源的软实力
基础设施助力双11(二): 发挥异构计算硬件资源的软实力
经典的编译算法解决了多种编程语言对多种微处理器架构的问题,在统一的编译框架上实现高级编程语言(比如C++ 和Java)到目标机器可执行代码的转换,这是编译1.0 时代的主要目标。在编译2.0 时代,增强了通用优化和关 ...
基础设施助力双11(一):X86 CPU的定制和演进
基础设施助力双11(一):X86 CPU的定制和演进
双11的最终成功是一个从上层业务应用到底层服务器集群的庞大系统协同的结果,其中作为计算力输出主角的定制X86 CPU功不可没 。双11只是阿里业务对计算需求的高速持续增长的一个缩影。而与之形成鲜明对比的是,支撑半 ...
聊聊HTTPS环境DNS优化:美图App请求耗时节约近半案例
聊聊HTTPS环境DNS优化:美图App请求耗时节约近半案例
DNS 服务作用于网络连接之前,将域名解析为 IP 地址供后续流程进行连接。DNS 查询时,会先在本地缓存中尝试查找,如果不存在或是记录过期,就继续向 DNS 服务器发起递归查询,这里的 DNS 服务器一般就是运营商的 DNS ...
聊聊高并发长连接架构:百万在线的美拍直播弹幕系统如何实现
聊聊高并发长连接架构:百万在线的美拍直播弹幕系统如何实现
直播弹幕指直播间的用户,礼物,评论,点赞等消息,是直播间交互的重要手段。美拍直播弹幕系统从 2015 年 11 月到现在,经过了三个阶段的演进,目前能支撑百万用户同时在线。比较好地诠释了根据项目的发展阶段,进行 ...
企业并购后的IT整合策略
企业并购后的IT整合策略
在中国企业做强做大愿望的驱动下,企业间的并购活动变得越来越频繁。在信息化已经广泛成为企业业务运作工具的今天,IT系统整合成为企业并购以后不可避免的问题。有人认为,明基并购西门子的失败,很大的原因就是因为 ...
APP分层架构设计随想
APP分层架构设计随想
互联网分层架构的本质,是数据的移动。互联网分层架构演进的核心原则:让上游更高效的获取与处理数据(复用),让下游能屏蔽数据的获取细节(封装)。不管数据怎么移动,最终都会汇聚到客户端。服务端的分层架构设计 ...
美团点评数据库高可用架构的演进与设想
美团点评数据库高可用架构的演进与设想
在2015年之前,美团点评(点评侧)长期使用MMM(Master-Master replication manager for MySQL)做数据库高可用,积累了比较多的经验,也踩了不少坑,可以说MMM在公司数据库高速发展过程中起到了很大的作用。整个MyS ...
中小型研发团队架构实践之集中式日志ELK
中小型研发团队架构实践之集中式日志ELK
日志可分为系统日志、应用日志以及业务日志,系统日志给运维人员使用,应用日志给研发人员使用,业务日志给业务操作人员使用。我们这里主要讲解应用日志,通过应用日志来了解应用的信息和状态,以及分析应用错误发生 ...

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

社区热帖

      GMT+8, 2018-1-16 03:43 , Processed in 0.097688 second(s), 16 queries .