热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

互联网分布式服务设计–接口基础协议

一、目录大纲接口基础协议接口一致性模式(同步&异步)接口授权&签名接口限流&熔断模式接口性能优化技巧二、接口基础协议    内网服务接口,通用协议定义

一、目录大纲



  • 接口基础协议

  • 接口一致性模式(同步&异步)

  • 接口授权&签名

  • 接口限流&熔断模式

  • 接口性能优化技巧

二、接口基础协议

       内网服务接口,通用协议定义在HttpGet、HttpPost协议两种。对于接口定义,我们通常采用基于Restful协议定义约束,提供给我们的业务方调用。

       通用的请求类,我们习惯性分为两种:带分页和不带分页的请求,带分页的请求,我们一般定义如下数据结构

public class RequestBase
{
public RequestBase();
public bool allow_paging { get; set; }
public int page_index { get; set; }
public int page_size { get; set; }
public string order_by { get; set; }
public bool if_asc { get; set; }
public int skip { get; }
}

        业界对于接口协议返回数据结构,一般定义如下:

public class ResponseBase
{
public bool success { get; set; }
public string code { get; set; }
public string errorMsg { get; set; }
public T data { get; set; }
}

         对于文件流操作上传HttpPost的接口,例如采用Form表单提交,并上传图片流

///


/// 使用Post方法获取字符串结果
///

///


///

Post表单内容
///


///

默认20秒
///

响应内容的编码类型(默认utf-8)
///
public static string PostForm(string url, List formItems, COOKIEContainer COOKIECOntainer= null, string refererUrl = null, Encoding encoding = null, int timeOut = 20000)
{
HttpWebRequest request
= (HttpWebRequest)WebRequest.Create(url);
#region 初始化请求对象
request.Method
= "POST";
request.Timeout
= timeOut;
request.Accept
= "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8";
request.KeepAlive
= true;
request.UserAgent
= "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/31.0.1650.57 Safari/537.36";
if (!string.IsNullOrEmpty(refererUrl))
request.Referer
= refererUrl;
if (COOKIEContainer != null)
request.COOKIEContainer
= COOKIEContainer;
if (url.StartsWith("https"))
{
ServicePointManager.ServerCertificateValidationCallback
= new System.Net.Security.RemoteCertificateValidationCallback((object sender, X509Certificate certificate, X509Chain chain, SslPolicyErrors sslPolicyErrors) =>
{
return true;
});
}
#endregion
string boundary = "----" + DateTime.Now.Ticks.ToString("x");//分隔符
request.COntentType= string.Format("multipart/form-data; boundary={0}", boundary);
//请求流
var postStream = new MemoryStream();
#region 处理Form表单请求内容
//是否用Form上传文件
var formUploadFile = formItems != null && formItems.Count > 0;
if (formUploadFile)
{
//文件数据模板
string fileFormdataTemplate =
"\r\n--" + boundary +
"\r\nContent-Disposition: form-data; name=\"{0}\"; filename=\"{1}\"" +
"\r\nContent-Type: application/octet-stream" +
"\r\n\r\n";
//文本数据模板
string dataFormdataTemplate =
"\r\n--" + boundary +
"\r\nContent-Disposition: form-data; name=\"{0}\"" +
"\r\n\r\n{1}";
foreach (var item in formItems)
{
string formdata = null;
//上传文件
formdata = string.Format(
fileFormdataTemplate,
item.Key,
//表单键
item.FileName);
//统一处理
byte[] formdataBytes = null;
//第一行不需要换行
if (postStream.Length == 0)
formdataBytes
= Encoding.UTF8.GetBytes(formdata.Substring(2, formdata.Length - 2));
else
formdataBytes
= Encoding.UTF8.GetBytes(formdata);
postStream.Write(formdataBytes,
0, formdataBytes.Length);
//写入文件内容
if (item.FileContent != null && item.FileContent.Length > 0)
{
postStream.Write(item.FileContent,
0, item.FileContent.Length);
}
}
//结尾
var footer = Encoding.UTF8.GetBytes("\r\n--" + boundary + "--\r\n");
postStream.Write(footer,
0, footer.Length);
}
else
{
request.ContentType
= "application/x-www-form-urlencoded";
}
#endregion
request.ContentLength
= postStream.Length;
#region 输入二进制流
if (postStream != null)
{
postStream.Position
= 0;
//直接写入流
Stream requestStream = request.GetRequestStream();
byte[] buffer = new byte[1024];
int bytesRead = 0;
while ((bytesRead = postStream.Read(buffer, 0, buffer.Length)) != 0)
{
requestStream.Write(buffer,
0, bytesRead);
}
////debug
//postStream.Seek(0, SeekOrigin.Begin);
//StreamReader sr = new StreamReader(postStream);
//var postStr = sr.ReadToEnd();
postStream.Close();//关闭文件访问
}
#endregion
HttpWebResponse response
= (HttpWebResponse)request.GetResponse();
if (COOKIEContainer != null)
{
response.COOKIEs
= COOKIEContainer.GetCOOKIEs(response.ResponseUri);
}
using (Stream respOnseStream= response.GetResponseStream())
{
using (StreamReader myStreamReader = new StreamReader(responseStream, encoding ?? Encoding.UTF8))
{
string retString = myStreamReader.ReadToEnd();
return retString;
}
}
}

       

///


/// 表单数据项
///

public class FormItemModel
{
///
/// 表单键,request["key"]
///

public string Key { set; get; }
///
/// 表单值,上传文件时忽略,request["key"].value
///

public string Value { set; get; }
///
/// 上传的文件名
///

public string FileName { set; get; }
///
/// 上传的文件内容
///

public byte[] FileContent { set; get; }
}

调用示例:

var cOntent= PostForm(reqUrl, new List()
{
new FormItemModel()
{
Key
= "image_fn",
Value
= "",
FileName
= "1.jpg",
FileContent
= request.image_fn
}
});

三、接口一致性模式(同步&异步)

参考文章 https://blog.csdn.net/qq_42192693/article/details/120391725

接口一致性模式包括

1、纯DB模式交互: 尽量控制DB拆分原则,在同一数据库实例下,通过DB的ACID特性保证事务一致性

2、DB+分布式服务组合:

     无中心化的微服务架构进行有效的拆分实现敏捷开发和自动化部署,并且在海量用户请求下,提高微服务架构细粒度的水平伸缩能力。

     

细粒度的水平伸缩能力。 

四、接口授权&签名

五、接口限流&熔断模式

六、接口性能优化技巧

 


原文链接:https://www.cnblogs.com/shanshanyuxuan/p/15954316.html



推荐阅读
  • 提升Android开发效率:Clean Code的最佳实践与应用
    在Android开发中,提高代码质量和开发效率是至关重要的。本文介绍了如何通过Clean Code的最佳实践来优化Android应用的开发流程。以SQLite数据库操作为例,详细探讨了如何编写高效、可维护的SQL查询语句,并将其结果封装为Java对象。通过遵循这些最佳实践,开发者可以显著提升代码的可读性和可维护性,从而加快开发速度并减少错误。 ... [详细]
  • Kafka 是由 Apache 软件基金会开发的高性能分布式消息系统,支持高吞吐量的发布和订阅功能,主要使用 Scala 和 Java 编写。本文将深入解析 Kafka 的安装与配置过程,为程序员提供详尽的操作指南,涵盖从环境准备到集群搭建的每一个关键步骤。 ... [详细]
  • Python 实战:异步爬虫(协程技术)与分布式爬虫(多进程应用)深入解析
    本文将深入探讨 Python 异步爬虫和分布式爬虫的技术细节,重点介绍协程技术和多进程应用在爬虫开发中的实际应用。通过对比多进程和协程的工作原理,帮助读者理解两者在性能和资源利用上的差异,从而在实际项目中做出更合适的选择。文章还将结合具体案例,展示如何高效地实现异步和分布式爬虫,以提升数据抓取的效率和稳定性。 ... [详细]
  • MongoDB核心概念与基础知识解析
    MongoDB 是一种基于分布式文件存储的非关系型数据库系统,主要采用 C++ 语言开发。本文将详细介绍 MongoDB 的核心概念和基础知识,包括其与传统 SQL 数据库的区别,数据库及集合的基本操作,如数据的插入、更新、删除和查询等。通过本文,读者可以全面了解 MongoDB 的基本功能及其应用场景。 ... [详细]
  • 本文详细解析了高性能通信库 NanoMsg 的框架及其应用场景。其中,BUS模式支持多对多的简单通信方式,消息会传递给所有直接连接的节点。REQREP模式则适用于构建无状态的服务集群,用于处理用户的请求,每个请求都需要一个相应的响应。 ... [详细]
  • 【漫画解析】数据已删,存储空间为何未减?揭秘背后真相
    在数据迁移过程中,即使删除了原有数据,存储空间却未必会相应减少。本文通过漫画形式解析了这一现象背后的真相。具体来说,使用 `mysqldump` 命令进行数据导出时,该工具作为 MySQL 的逻辑备份工具,通过连接数据库并查询所需数据,将其转换为 SQL 语句。然而,这种操作并不会立即释放存储空间,因为数据库系统可能保留了已删除数据的碎片信息。文章进一步探讨了如何优化存储管理,以确保数据删除后能够有效回收存储空间。 ... [详细]
  • Zookeeper作为Apache Hadoop生态系统中的一个重要组件,主要致力于解决分布式应用中的常见数据管理难题。它提供了统一的命名服务、状态同步服务以及集群管理功能,有效提升了分布式系统的可靠性和可维护性。此外,Zookeeper还支持配置管理和临时节点管理,进一步增强了其在复杂分布式环境中的应用价值。 ... [详细]
  • 下篇:APP端登录流程详解——前置知识与技术准备 ... [详细]
  • 2016-2017学年《网络安全实战》第三次作业
    2016-2017学年《网络安全实战》第三次作业总结了教材中关于网络信息收集技术的内容。本章主要探讨了网络踩点、网络扫描和网络查点三个关键步骤。其中,网络踩点旨在通过公开渠道收集目标信息,为后续的安全测试奠定基础,而不涉及实际的入侵行为。 ... [详细]
  • ZAB算法:实现强一致性的分布式协调机制
    ZAB算法:实现强一致性的分布式协调机制 ... [详细]
  • 利用CSV Data Set Config实现JMeter参数化测试的详细指南
    本文详细介绍了如何使用JMeter中的CSV Data Set Config元素来实现参数化测试。通过该配置元件,用户可以轻松地从外部CSV文件中读取数据,从而提高测试的灵活性和可扩展性。文章不仅提供了具体的配置步骤,还结合实际案例,展示了如何在不同的测试场景中应用这一功能,帮助读者更好地理解和掌握JMeter参数化测试的技巧。 ... [详细]
  • 揭秘腾讯云CynosDB计算层设计优化背后的不为人知的故事与技术细节
    揭秘腾讯云CynosDB计算层设计优化背后的不为人知的故事与技术细节 ... [详细]
  • 解读中台架构:微服务与分布式技术的区别及应用
    中心化与去中心化是长期讨论的话题。中心化架构的优势在于部署和维护相对简单,尤其在服务负载较为稳定的情况下,能够提供高效稳定的性能。然而,随着业务规模的扩大和技术需求的多样化,中心化架构的局限性逐渐显现,如扩展性和故障恢复能力较差。相比之下,微服务和分布式技术通过解耦系统组件,提高了系统的灵活性和可扩展性,更适合处理复杂多变的业务场景。本文将深入探讨中台架构中微服务与分布式技术的区别及其应用场景,帮助读者更好地理解和选择适合自身业务的技术方案。 ... [详细]
  • 在前一篇文章《Hadoop》系列之“踽踽独行”(二)中,我们详细探讨了云计算的核心概念。本章将重点转向物联网技术,全面解析其基本原理、应用场景及未来发展前景。通过深入分析物联网的架构和技术栈,我们将揭示其在智能城市、工业自动化和智能家居等领域的广泛应用潜力。此外,还将讨论物联网面临的挑战,如数据安全和隐私保护等问题,并展望其在未来技术融合中的重要角色。 ... [详细]
  • 在C语言中,定义一个包含学号、姓名和年龄的学生信息结构体,并遵循严格的命名规范。首先,初始化结构体变量的所有成员为默认值,然后将其学号设为88,姓名设为“liming”,年龄设为25。最后,在控制台上输出该结构体变量的详细信息,以验证数据的正确性。例如,使用 `typedef struct Student` 定义结构体类型。 ... [详细]
author-avatar
几米小八_198
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有