惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Stack Overflow Blog
Stack Overflow Blog
T
Tailwind CSS Blog
Recent Announcements
Recent Announcements
宝玉的分享
宝玉的分享
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
P
Proofpoint News Feed
D
Docker
Google DeepMind News
Google DeepMind News
aimingoo的专栏
aimingoo的专栏
B
Blog RSS Feed
Microsoft Security Blog
Microsoft Security Blog
博客园 - 【当耐特】
M
MIT News - Artificial intelligence
云风的 BLOG
云风的 BLOG
小众软件
小众软件
Hugging Face - Blog
Hugging Face - Blog
WordPress大学
WordPress大学
IT之家
IT之家
H
Help Net Security
Apple Machine Learning Research
Apple Machine Learning Research
Martin Fowler
Martin Fowler
S
SegmentFault 最新的问题
B
Blog
D
DataBreaches.Net

博客园 - egmkang

配眼镜最佳实践 [Python]解密pyc文件 CPU实现原子操作的原理 Flash----一种VirtualActor模式的分布式有状态系统原型 [投资]对价值投资新的理解 通过Consul Raft库打造自己的分布式系统 Dapr实现分布式有状态服务的细节 [06] 优化C#服务器的思路和工具的使用 [05] 通过P/Invoke加速C#程序 [04] C# Alloc Free编程之实践 [03] C# Alloc Free编程 [02] 多线程逻辑编程 [01] C#网络编程的最佳实践 C#如何正确的做深拷贝 C# Protobuf如何做到0分配内存的序列化 最近很火的namebase羊毛, 手把手教你怎么薅 DotNetty发送请求的最佳实践 C# protobuf自动更新cs文件 多读少写场景下多线程锁冲突的降低
C# Protobuf如何做到0分配内存的序列化/反序列化(2)
egmkang · 2020-12-22 · via 博客园 - egmkang

受限于当时的基础设施, 只能做到这样的程度: C# Protobuf如何做到0分配内存的序列化

但是Protobuf 3.13开始提供对Span的支持, 就意味着可以真正做到0分配内存, 对GC非常友好:

  • Add ParseFrom(ReadOnlySequence<byte>) method to enable GC friendly
    parsing with reduced allocations and buffer copies. (#7351)
  • Add support for serialization directly to a IBufferWriter<byte> or
    to a Span<byte> to enable GC friendly serialization.
    The new API is available as extension methods on the IMessage type. (#7576)

Protobuf 3.14也修改了ByteString:

  • annotate ByteString.CopyFrom(ReadOnlySpan) as SecuritySafeCritical (#7701)

代码的例子也很简单:

//反序列化
var span = new ReadOnlySequence<byte>(array);
var message = MessageTest.Parser.ParseFrom(span);

//序列化
var outputSpan = new Span<byte>(destArray, 0, message.CalculateSize());
message.WriteTo(outputSpan);

需要安装Protobuf 3.14.0以上版本

我们的测试代码, 序列化反序列化1W次, 看看内存分配:

static void Main(string[] args)
{
     var array = new byte[0];
     var destArray = new byte[1024];
     for (int i = 0; i < 10000; ++i) 
     {
          var span = new ReadOnlySequence<byte>(array);
          var message = MessageTest.Parser.ParseFrom(span);

          message.L1 = 1112121;
          message.L2 = 231243452324234;

          var outputSpan = new Span<byte>(destArray, 0, message.CalculateSize());
          message.WriteTo(outputSpan);
     }
}

然后sampling的结果:

只有那个反序列化的对象是被new出来的, 就是我们想要的效果, 建议都升级一下.