热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

软硬件方案

为什么80%的码农都做不了架构师?语言方案:优:并行,容错,调试,热部署,测

为什么80%的码农都做不了架构师?>>>   hot3.png

语言方案:

优:

并行,容错,调试,热部署,测试,高阶函数,柯里化(适配器),惰性求值,延续(没有栈。迭代。尾递归。单参数--单返回值。WEB,JETTY。不需要栈。stackless),模式匹配.

劣:

调用(使用栈,浪费空间),

 

数据提交:

0,流提交(免解码);

1,服务器提交===用户体验===请求已经发出去了;

2,无脚本;

3,快速验证(错误频率记忆===》检查项目顺序调整)。

 

数据获取(缓存):

1,流缓存(免编码);

2,检索数(XML)据+商品数据(HTML)+UI元素(XSL+图片);

3,全缓存(对所有除事务以外的内容包括数据使用缓存+使用URL变形做内容更新);

4,内容更新管理。

 

内容策略:

1,所有内容在系统处理全程保持流(字节)的形式。不解码,不编码;

 

处理器调度:

1,动态优先级(IO任务优先:网卡,数据库,磁盘。内存任务优先,IO任务排队);

2,抢占;

3,水平调度;

4,垂直调度;

5,智能调度引擎(自适应调度);

6,资源定义:处理器,内存,网络,磁盘+数据库

内存管理:

1,内存调度;

2,边界控制:溢出,死锁(内存争夺)。

3,缓存控制(开源库);

4,关闭虚存。

5,服务降级。 

数据库:

1,取结果条数;

资源管理:

1,数据库连接;

2,数据库锁(没有锁。不设计任何并发更新);

3,无依赖设计(所有部件独立工作。互不依赖);

循环控制:

1,没有循环(用函数式语言);

 

数据结构测试:

1,数据结构性能退化;

 

压力测试:

1,平均响应时间;

2,90th%响应时间;

3,突发活动(任意组合);

4,阶段性增加负载;

5,通量;

6,处理器,内存,网卡,磁盘负载时间;

7,图片。

恢复测试:

1,系统的恢复时间;

兼容性测试:

1,浏览器;

2,OS;

3,网络(不同接入点);

位置测试:

1,偏远地区;

2,特大城市;

3,中小城市;

4,四级城市;

5,乡村;

6,其它特殊接入点;

UI测试:

1,外观;

2,内容测试(语法,语义,流程,标题);

3,移动设备;

4,图片页;

 

前端:

1,客户端缓存+内存缓存+数据库缓存(与内存缓存互为独立;没有重复缓存);

2,内容压缩;

3,网卡加速,SSL加速,XML加速,HTML压缩;

4,UI元素的分步加载(XSL INCLUDE);

5,前端反向代理

 

系统运行监控(运维):

1,系统状态监控:节点工作状态:

2,服务追踪:用户事务日志(IP标识。使用在线事务审计数据);

2,报“错”机制--》电子邮件;

 

网络负载均衡可选方案:

1,基于特定服务器软件的负载均衡

2,基于DNS的负载均衡

3,基于四层交换技术的负载均衡(收信IP!=送信IP)

4,基于七层交换技术的负载均衡

5,站点镜像技术

网卡集群:

1, 上行假设轻负载。但要防攻击(DoS);

2,

 

安全:

1,端口关闭;

2,一阶段审计;

 

机房服务质量监督:

1,防火墙策略;

2,带宽;

3,接入稳定性;

4,路由可达性。

5,共享或独享带宽。

 

运筹学:

规划论:线性,动态;

排队论。

最短任务优先(排队论):

1,快速疏散。短的走的快;短任务拉开=》时间上的均匀分布;

2,最短周转时间;

3,最短服务时间;

4,全系统优化(人,机,软)。

 

内存管理开销:

1,GC的线程开销(内存,CPU周期,线程管理,计数);

2,程序不创建任何对象。所有对象在对象池(COMMONS POOL)中获取(和创建)。对象数量的多少由程序自动决定。但是要记得在线程任务结束后主动还回对象(这才是关掉GC的真正开销。因为从对象池获取对象与NEW一个对象的代码量其实是一样的。这里指的是程序员角度的开销);

CPU优先级:

1,CPU角度==》全部非阻塞任务的随时待“命”。最小程度的IO捆绑;

 

 

有的:

协程。微线程。无栈。进程。

要求:

大量大文件请求(压缩,缓存,IO压力);

大量数据请求(主要:商品数据,索引数据==》IO压力);

大量事务(购买,支付==》数据库更新);

主要挑战:大的(效率,带宽,内存==》索引数据,商品数据)。多的(效率)。

IO效率==》字节流。

内存的主要消耗者分析:UI,事务优先。其余全用于索引数据,商品数据的缓存与工作空间(硬盘==》网卡拷贝)。

处理器不用分析。网卡比特流用专用网卡解决。内容用XML加速器。

专用设备:

  专用网卡。专用内存。专用硬盘。专用主板。专用CPU。

冗余设备:

  内存,硬盘,CPU,网卡,电源。

系统级设备:

  双机热备。

数据设备:

  数据冷备,热备,灾备。

服务器论坛学习。

 

加速设备:

网卡(比特流),XML,SSL。
 

而MAP/REDUCE因为是在生产环境中提出并成功应用的生产计划/模式,天生具有很强的实践性。

MAP/REDUCE加工备忘:

1,有管理的,全方位的作业调度:水平调度---给谁做;垂直调度--谁先做;内部调度---机器系统调度;外部调度---人机系统调度);

2,调度策略的实时调整(系统性能实时评估-->反馈机制---》策略调整(量化调整与方案调整));

3,内部作业的划分(几个MAP,几个REDUCE):

4,内存模型(时变特性);

5,中间结果 - 平面;

6,系统进化(约束适应,新质量,新功能);

7,延续,闭包的价值分析(与对象的对比);

8,规则引擎的应用;

9,接口封装的形式(REST,XML,WEB SERVICE)与ESB的应用;

内部作业的划分详细包括:

1,UI引擎(内容服务--小内存+大磁盘,高带宽:客户==首页+搜索+购买+支付+注册,商品,商务,图片);

2,数据引擎(数据服务:索引,商品,关联商品,物流,支付,评论,交易历史,商务支持,交易统计);

3,事务引擎(订单,支付,评论,评论审核,注册,商务事务,审计);

5,I/O引擎;

6,性能/成本引擎:浏览器缓存(更新周期=日期后缀)+内容压缩=》带宽

 

相关备忘:

架构目标的种类:

1,抽象建模---多主体系统。自由系统。提供相对自由的资源分配模型;

2,事务处理---单主体系统。服务型系统。对外强调服务。内部则强调个体服从整体。所以个体是不考虑的。只考虑整体。所以只有一个主体,即整体。这样的系统没有个体---象一支军队。存在的是一个Team,不是人;

3,实时系统---无主体系统。响应型系统。不是强调,而是必须做到即时响应。在这样的系统中,什么都不存在。所有主体都位于系统以外。考虑问题时,都不考虑系统。考虑的全是系统以外的因子。系统被假设为不存在的。比如,可以假设它为上帝,将满足你的所有要求。上帝是不需要考虑的。因为她是完美的。她没有缺陷。她将响应你全部的请求;

4,图形系统---工具型系统。领域系统。可有主体,可没有主体。都行;

5,云计算---单主体系统。事务型系统。服务型系统。强调整体性能与效率。个体同样不考虑(需要对象模型的分析性平台除外)。

6,。。。。。。

 

领域建模相关备忘:

1,领域建模需要对相关领域进行元操作提取。也就是说,这种系统的需求分析不应该具体化。而应该保持一定程度上的抽象性。即,用户说的话,我们记下来,并且写到系统中去。详细设计的目的不是将用户需求全都变成具体功能,而是该具体的具体,该抽象的抽象。具体与抽象的边界要与用户进行反复的确认与理解才能得到。该抽象的被具体了,与该具体的被抽象了,都是不对的。

需要的是脑子。

 

http://www.translatorsbase.com/UserAccount.aspx


转:https://my.oschina.net/digerl/blog/10964



推荐阅读
  • 摘要:本文中,我们将进一步理解微服务架构的核心要点和实现原理,为读者的实践提供微服务的设计模式,以期让微服务在读者正在工作的 ... [详细]
  • nsitionalENhttp:www.w3.orgTRxhtml1DTDxhtml1-transitional.dtd ... [详细]
  • 互联网世界 9 种基本的商业模式
    互联网世界9种基本的商业模式一个商业模式是运行一个公司的方法;通过该模式的运作,一个公司能维持自己的生存,就是说,能有收益。商业模式意味着一个公司是如何通过在价值链中定位自己,从而获 ... [详细]
  • 一个不错的JDBC连接池教程(带具体例子)
    1.前言数据库应用,在许多软件系统中经常用到,是开发中大型系统不可缺少的辅助。但如果对数据库资源没有很好地管理(如:没有及时回收数据库的游 ... [详细]
  • 开发笔记:计网局域网:NAT 是如何工作的?
    篇首语:本文由编程笔记#小编为大家整理,主要介绍了计网-局域网:NAT是如何工作的?相关的知识,希望对你有一定的参考价值。 ... [详细]
  • SSL协议、TLS协议,使用哪一种更安全?
    在金融银行业,保护机密信息的安全至关重要。由于财务记录完全通过在线数据库维护,因此实施保护客户、银行和金融机构免受黑客攻击的安全功能比以往任何时候都更加重要。安全套接字层(SSL) ... [详细]
  • crossorigin注解添加了解决不了跨域问题_CORS与@CrossOrigin详解
    1、跨域的基本概念a、跨域的解释要了解跨域,首先需要知晓浏览器的同源策略,简单的说就是两个请求协议、端口、主机都相同,则两个请求具有相同的 ... [详细]
  • java内存模型浅析_浅析Java内存模型
    在并发编程中,需要处理两个关键问题:线程之间如何通信以及线程之间如何同步。通信是指线程之间以何种机制来交换信息。同步是指程序中用于控制不同线程间操作发生 ... [详细]
  • Linux是一套免费使用和***传播的类UNIX操作系统,主要用于基于Intel x86系列CPU的计算机上。Linux系统是由全世界各地的成千上万的程序员合适的方式定制自己的Li ... [详细]
  • 文章目录前言必知必会的软件服务器分类机架式服务器塔式服务器刀片式服务器三者的区别虚拟服务器(云服务器)服务器的硬件组成服务器常见的品牌前言本文是循序渐进学linux的第一课,为 ... [详细]
  • CAS介绍CAS(CentralAuthenticationService),是耶鲁大学开发的单点登录系统(SSO,singlesign-on),应用广泛,具有独立于平台的,易于理解,支持代 ... [详细]
  • 11 微服务网关(一)概念介绍  Zuul简单入门
    11.1服务网关的概念11.1.1什么是微服务网关11.1.2作用和应用场景11.2常见的API网关实现方式11.3基于Nginx的网关实现IP地址映射到路径,统一 ... [详细]
  • Nginx使用AWStats日志分析的步骤及注意事项
    本文介绍了在Centos7操作系统上使用Nginx和AWStats进行日志分析的步骤和注意事项。通过AWStats可以统计网站的访问量、IP地址、操作系统、浏览器等信息,并提供精确到每月、每日、每小时的数据。在部署AWStats之前需要确认服务器上已经安装了Perl环境,并进行DNS解析。 ... [详细]
  • 本文介绍了在rhel5.5操作系统下搭建网关+LAMP+postfix+dhcp的步骤和配置方法。通过配置dhcp自动分配ip、实现外网访问公司网站、内网收发邮件、内网上网以及SNAT转换等功能。详细介绍了安装dhcp和配置相关文件的步骤,并提供了相关的命令和配置示例。 ... [详细]
  • 一句话解决高并发的核心原则
    本文介绍了解决高并发的核心原则,即将用户访问请求尽量往前推,避免访问CDN、静态服务器、动态服务器、数据库和存储,从而实现高性能、高并发、高可扩展的网站架构。同时提到了Google的成功案例,以及适用于千万级别PV站和亿级PV网站的架构层次。 ... [详细]
author-avatar
xillb_486
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有