为什么写这篇文章
自己以前都走了弯路,以为学习战术设计就会DDD了,其实DDD的精华在战略设计,但是对于我们菜鸟来说,学习一些技术概念也是挺好的
经常看到这些术语,概念太多,也想简单学习一下,记忆力比较差记录一下实现的细节
领域事件
1.领域事件是过去发生的与业务有关的事实,一但发生就不可更改,所以存储事件时只能追加
3.领域事件具有时间点的特征,所有事件连接起来会形成明显的时间轴
4.领域事件会导致目标对象状态的变化,聚合根的行为会产生领域事件,所以会改变聚合的状态
在聚合根里面维护一个领域事件的聚合,每一个事件对应一个Handle,通过反射维护一个数据字典,通过事件查找到指定的Handle
领域事件实现的方式:目前看到有3种方式,MediatR,消息队列 ,发布订阅模式
eShopOnContainers 中使用的是MediatR
ENode 中使用的是EQueue,EQueue是一个纯C#写的消息队列
使用已经写好的消息队列Rabbitmq ,kafka
事件存储,事件溯源,事件快照
事件存储:存储所有聚合根里面发生过的事件
1.事件存储中可以做并发的处理,比如Command 重复,领域事件的重复
2.领域事件的重复通过聚合根Id+版本号判断,可以在数据库中建立联合唯一索引,在存储事件时检测重复,记录重复的事件,根据业务做处理
3.这里要保证存储事件与发布领域事件的一致性
如何保证存储事件与发布领域事件的一致性
先存储事件然后在发布领域事件,如果发生异常,就一直重试,一直到成功为止,也可以做一定的处理,比如重试到一定的次数,就通知,进行人工处理
我选择了CAP + Policy + Dapper
事件溯源:在事件存储中记录导致状态变化的一系列领域事件。通过持久化记录改变状态的事件,通过重新播放获得状态改变的历史。 事件回放可以返回系统到任何状态
聚合快照:聚合的生命周期各有长短,有的聚合里面有大量的事件,,事件越多加载事件以及重建聚合的执行效率就会越来越低,快照里面存储的是聚合
1.定时存储整个聚合根:使用定时器每隔一段时间就存储聚合到快照表中
2.定量存储整个聚合根:根据事件存储中的数量来存储聚合到快照表中
事件溯源的实现方式
1.首先我们需要实现聚合In Memory,
2.在CommandHandler中订阅 Command命令,
创建聚合时 ,在内存中维护一个数据字典,key为:聚合根的Id,value为:聚合
修改,删除,聚合时,根据聚合根的Id,查询出聚合
如果内存中聚合不存在时:根据聚合根的Id 从聚合快照表中查询出聚合,然后根据聚合快照存储的时间,聚合根Id,查询事件存储中的所有事件,然后回放事件,得到聚合最终的状态
记录遇到的问题
由于基础非常的差,所以实现的方式都是以最简单的方式来写的,存在许多的问题,代码中有问题的地方希望大家提出来,让我学习一下
代码的实现目前还没有写快照的部分,也没有处理EventStorage中的命令重复与聚合根+版本号重复,具体的请看汤总的ENode,里面有全部的实现
1.怎样保证存储事件,发布事件的最终一致性
2.怎么解析EventStorage中的事件,回放事件
先存储事件,当事件存储成功之后,在发布事件
存储事件失败:就一直重试,发布事件失败,使用的是CAP,CAP内部使用的是本地消息表的方式,如果发布事件失败,也一直重试,如果服务器重启了,Rabbitmq里面消息为Ack,消息没有丢,重连后会继续执行
存储事件,发布事件
/// <summary>
/// 存储聚合根中的事件到EventStorage 发布事件
/// </summary>
/// <typeparam name="TAggregationRoot"></typeparam>
/// <param name="event"></param>
/// <returns></returns>
public async Task AppendEventStoragePublishEventAsync<TAggregationRoot>(TAggregationRoot @event)
where TAggregationRoot : IAggregationRoot
{
var domainEventList = @event.UncommittedEvents.ToList();
if (domainEventList.Count == 0)
{
throw new Exception("请添加事件!");
}
await TryAppendEventStorageAsync(domainEventList).ContinueWith(async e =>
{
if (e.Result == (int)EventStorageStatus.Success)
{
await TryPublishDomainEventAsync(domainEventList).ConfigureAwait(false);
@event.ClearEvents();
}
});
}
/// <summary>
/// 发布领域事件
/// </summary>
/// <returns></returns>
public async Task PublishDomainEventAsync(List<IDomainEvent> domainEventList)
{
using (var connection =
new SqlConnection(ConnectionStr))
{
if (connection.State == ConnectionState.Closed)
{
await connection.OpenAsync().ConfigureAwait(false);
}
using (var transaction = await connection.BeginTransactionAsync().ConfigureAwait(false))
{
try
{
if (domainEventList.Count > 0)
{
foreach (var domainEvent in domainEventList)
{
await _capPublisher.PublishAsync(domainEvent.GetRoutingKey(), domainEvent).ConfigureAwait(false);
}
}
await transaction.CommitAsync().ConfigureAwait(false);
}
catch (Exception e)
{
await transaction.RollbackAsync().ConfigureAwait(false);
throw;
}
}
}
}
/// <summary>
/// 发布领域事件重试
/// </summary>
/// <param name="domainEventList"></param>
/// <returns></returns>
public async Task TryPublishDomainEventAsync(List<IDomainEvent> domainEventList)
{
var policy = Policy.Handle<SocketException>().Or<IOException>().Or<Exception>()
.RetryForeverAsync(onRetry: exception =>
{
Task.Factory.StartNew(() =>
{
//记录重试的信息
_loggerHelper.LogInfo("发布领域事件异常", exception.Message);
});
});
await policy.ExecuteAsync(async () =>
{
await PublishDomainEventAsync(domainEventList).ConfigureAwait(false);
});
}
/// <summary>
/// 存储聚合根中的事件到EventStorage中
/// </summary>
/// <returns></returns>
public async Task<int> AppendEventStorageAsync(List<IDomainEvent> domainEventList)
{
if (domainEventList.Count == 0)
{
throw new Exception("请添加事件!");
}
var status = (int)EventStorageStatus.Failure;
using (var connection = new SqlConnection(ConnectionStr))
{
try
{
if (connection.State == ConnectionState.Closed)
{
await connection.OpenAsync().ConfigureAwait(false);
}
using (var transaction = await connection.BeginTransactionAsync().ConfigureAwait(false))
{
try
{
if (domainEventList.Count > 0)
{
foreach (var domainEvent in domainEventList)
{
EventStorage eventStorage = new EventStorage
{
Id = Guid.NewGuid(),
AggregateRootId = domainEvent.AggregateRootId,
AggregateRootType = domainEvent.AggregateRootType,
CreateDateTime = domainEvent.CreateDateTime,
Version = domainEvent.Version,
EventData = Events(domainEvent)
};
var eventStorageSql =
$"INSERT INTO EventStorageInfo(Id,AggregateRootId,AggregateRootType,CreateDateTime,Version,EventData) VALUES (@Id,@AggregateRootId,@AggregateRootType,@CreateDateTime,@Version,@EventData)";
await connection.ExecuteAsync(eventStorageSql, eventStorage, transaction).ConfigureAwait(false);
}
}
await transaction.CommitAsync().ConfigureAwait(false);
status = (int)EventStorageStatus.Success;
}
catch (Exception e)
{
await transaction.RollbackAsync().ConfigureAwait(false);
throw;
}
}
}
catch (Exception e)
{
connection.Close();
throw;
}
}
return status;
}
/// <summary>
/// AppendEventStorageAsync异常重试
/// </summary>
public async Task<int> TryAppendEventStorageAsync(List<IDomainEvent> domainEventList)
{
var policy = Policy.Handle<SocketException>().Or<IOException>().Or<Exception>()
.RetryForeverAsync(onRetry: exception =>
{
Task.Factory.StartNew(() =>
{
//记录重试的信息
_loggerHelper.LogInfo("存储事件异常", exception.Message);
});
});
var result = await policy.ExecuteAsync(async () =>
{
var resulted = await AppendEventStorageAsync(domainEventList).ConfigureAwait(false);
return resulted;
});
return result;
}
/// <summary>
/// 根据DomainEvent序列化事件Json
/// </summary>
/// <param name="domainEvent"></param>
/// <returns></returns>
public string Events(IDomainEvent domainEvent)
{
ConcurrentDictionary<string, string> dictionary = new ConcurrentDictionary<string, string>();
//获取领域事件的类型(方便解析Json)
var domainEventTypeName = domainEvent.GetType().Name;
var domainEventStr = JsonConvert.SerializeObject(domainEvent);
dictionary.GetOrAdd(domainEventTypeName, domainEventStr);
var eventData = JsonConvert.SerializeObject(dictionary);
return eventData;
}
解析EventStorage中存储的事件
public async Task<List<IDomainEvent>> GetAggregateRootEventStorageById(Guid AggregateRootId)
{
try
{
using (var connection = new SqlConnection(ConnectionStr))
{
var eventStorageList = await connection.QueryAsync<EventStorage>($"SELECT * FROM dbo.EventStorageInfo WHERE AggregateRootId='{AggregateRootId}'");
List<IDomainEvent> domainEventList = new List<IDomainEvent>();
foreach (var item in eventStorageList)
{
var dictionaryDomainEvent = JsonConvert.DeserializeObject<Dictionary<string, string>>(item.EventData);
foreach (var entry in dictionaryDomainEvent)
{
var domainEventType = TypeNameProvider.GetType(entry.Key);
if (domainEventType != null)
{
var domainEvent = JsonConvert.DeserializeObject(entry.Value, domainEventType) as IDomainEvent;
domainEventList.Add(domainEvent);
}
}
}
return domainEventList;
}
}
catch (Exception ex)
{
throw;
}
注意事项
1.事件没持久化就代表事件还没发生成功,事件存储可能失败,必须先存储事件,在发布事件,保证存储事件与发布事件一致性
1.使用事件驱动,必须要做好冥等的处理
2.如果业务场景中有状态时:通过状态来控制
3.新建一张表,用来记录消费的信息,消费端的代码里面,根据唯一的标识,判断是否处理过该事件
4.Q端的任何更新都应该把聚合根ID和事件版本号作为条件,Q端的更新不用遵循聚合的原则,可以使用最简单的方式处理
5.仓储是用来重建聚合的,它的行为和集合一样只有Get ,Add ,Delete
6.DDD不是技术,是思想,核心在战略模块,战术设计是实现的一种选择,战略设计,需要面向对象的分析能力,职责分配,深层次的分析业务
感谢
虽然学习DDD的时间不短了,感觉还是在入门阶段,在学习的过程中有许多的不解,经常问ENode群里面的大佬,也经常@汤总,谢谢大家的帮助与解惑。