jianzhanger 的博客


  • 首页

  • 关于

  • 标签

  • 分类

  • 归档

  • 日程表

  • 搜索

美团即时物流的分布式系统架构设计

发表于 2018-11-26 | 分类于 转载

背景

美团外卖已经发展了五年,即时物流探索也经历了3年多的时间,业务从零孵化到初具规模,在整个过程中积累了一些分布式高并发系统的建设经验。最主要的收获包括两点:

  1. 即时物流业务对故障和高延迟的容忍度极低,在业务复杂度提升的同时也要求系统具备分布式、可扩展、可容灾的能力。即时物流系统阶段性的逐步实施分布式系统的架构升级,最终解决了系统宕机的风险。

  2. 围绕成本、效率、体验核心三要素,即时物流体系大量结合AI技术,从定价、ETA、调度、运力规划、运力干预、补贴、核算、语音交互、LBS挖掘、业务运维、指标监控等方面,业务突破结合架构升级,达到促规模、保体验、降成本的效果。

    阅读全文 »

详细的Docker入门总结(转载)

发表于 2018-11-15 | 分类于 转载

Docker 是什么?

Docker 到底是个什么东西呢?我们在理解 Docker 之前,首先得先区分清楚两个概念,容器和虚拟机。

可能很多读者朋友都用过虚拟机,而对容器这个概念比较的陌生。我们用的传统虚拟机如 VMware , VisualBox 之类的需要模拟整台机器包括硬件。

每台虚拟机都需要有自己的操作系统,虚拟机一旦被开启,预分配给它的资源将全部被占用。

阅读全文 »

如何构建一个低成本,高可用,少运维的ES平台?

发表于 2018-11-15 | 分类于 转载

本文作者将从以下几个方面介绍在这两个阶段的发展中为业务解决了哪些痛点以及是如何去解决这些痛点的:

  • 源动力

  • ES 平台

  • 回看业务

  • 搜索中台

阅读全文 »

应对大流量的一些思路(转载)

发表于 2018-11-15 | 分类于 转载

1. 首先,我们来说一下什么是大流量?

大流量,我们很可能会冒出:TPS(每秒事务量),QPS(每秒请求量),1W+,5W+,10W+,100W+…。其实并没有一个绝对的数字,如果这个量造成了系统的压力,影响了系统的性能,那么这个量就可以称之为大流量了。

阅读全文 »

10种室内定位技术原理深度解析

发表于 2018-10-26 | 分类于 转载

1

起源

人类为了不让自己迷失在茫茫大自然中,先后发明罗盘、指南针等工具,卫星定位的问世,解决了“我在哪里”的问题。在高度城市化的今天,室内空间越来越庞大复杂。人类战胜了大自然,却在自己构筑的钢筋水泥中迷了路。


阅读全文 »

2018年最值得关注的15大技术趋势

发表于 2018-10-25 | 分类于 转载

编者按:本文列举了2018年最值得关注的15大技术趋势,分别是区块链、狭义人工智能、地下交通系统、5G无线网络、比特币、增强现实、无人驾驶汽车、新太阳能技术、家庭虚拟助理、量子计算、外科手术机器人、飞行出租车、激光互联网、物联网、AR头戴设备。

通常情况下,技术趋势是很难准确预测的,因为预测未来本身就极其困难。但是我们还是可以从2017 年的一些显著的数据指标来推测2018年科技行业的一些发展趋势的。

阅读全文 »

大数据工程师必备技能(转载)

发表于 2018-10-22 | 分类于 转载

市场岗位

1、大数据的系统架构(掌握计算机体系结构、网络架构、编程范式、文件系统、分布并行处理)

2、大数据的系统分析(人工智能、机器学习、数理统计、矩阵计算、优化方法)

3、hadoop开发(大数据存储问题)

4、数据分析(至少需要熟练SPSS、STATISTIC、Eviews、SAS、大数据魔镜等数据分析软件中的一门,至少能用Acess等进行数据库开发,至少掌握一门数学软件如matalab、mathmatics进行新模型的构建,至少掌握一门编程语言。优秀的分析师可以掌握业务、管理、分析、工具、设计兼顾)

5、数据挖掘(数学知识要强一些,编程语言要掌握Java、Python)

6、大数据可视化(有点高级哈哈,涉及D3啊R啊等一些编程语言和Excel以及一些可视化工具,可以自行查阅一下或者看下面提及到的技能图谱)

阅读全文 »

假如有1亿用户的访问量,你的服务器架构是怎样的

发表于 2018-09-28 | 分类于 转载

我们以淘宝架构为例,了解下大型电商项目的服务端架构是怎样的,如图1所示:

上面是一些安全体系系统,如数据安全体系、应用安全体系、前端安全体系等。中间是业务运营服务系统,如会员服务、商品服务、店铺服务、交易服务等。还有共享业务,如分布式数据层、数据分析服务、配置服务、数据搜索服务等。最下面是中间件服务,如MQS即队列服务,OCS即缓存服务等。

图中也有一些看不到,例如高可用的体现、实现双机房容灾和异地机房单元化部署,为淘宝业务提供稳定、高效和易于维护的基础架构支撑。

假如有1亿用户的访问量,你的服务器架构是怎样的?

阅读全文 »

从单机到2000万QPS:如何搭建高可用Redis平台

发表于 2018-09-27 | 分类于 转载

知乎存储平台团队基于开源 Redis 组件打造的 Redis 平台管理系统,经过不断的研发迭代,目前已经形成了一整套完整自动化运维服务体系,提供一键部署集群,一键自动扩缩容,Redis 超细粒度监控,旁路流量分析等辅助功能。

目前,Redis 在知乎的规模如下:

  • 机器内存总量约 70TB,实际使用内存约 40TB。
  • 平均每秒处理约 1500 万次请求,峰值每秒约 2000 万次请求。
  • 每天处理约 1 万亿余次请求。
  • 单集群每秒处理最高每秒约 400 万次请求。
  • 集群实例与单机实例总共约 800 个。
  • 实际运行约 16000 个 Redis 实例。
  • Redis 使用官方 3.0.7 版本,少部分实例采用 4.0.11 版本。
    阅读全文 »

UI动效基本规则全面总结(转载)

发表于 2018-09-17 | 分类于 转载

有了这篇文章,你就不用在其他地方学习基本的动效设计规则了。


阅读全文 »
1…345…7
jianzhanger

jianzhanger

静以修身,俭以养德

64 日志
2 分类
20 标签
© 2018 — 2020 jianzhanger
由 Hexo 强力驱动
|
主题 — NexT.Gemini v5.1.4