课程安排
- 智能调度生成运输任务
- 实现运输任务相关业务
- 实现司机入库业务
1、背景说明
前面将运单合并,合并之后就需要进行调度计算(按照车辆的运力生成运输任务),以及司机的作业单,进入到司机与车辆的运输环节。
2、任务调度
2.1、分析
业务流程如下:
调度中心只关心调度,具体的运输任务入库需要具体的work微服务实现
线路、车辆、车次操作关系查看文档:sl-express-ms-base使用手册
2.2、实现
这里采用的是xxl-job的分片式任务调度,主要目的是为了并行多处理车辆,提升调度处理效率。
sl-base数据库表
车表:该车能装多少货物
车辆计划相关
2.2.1、调度入口
逻辑
1 xxl job分片任务
分片逻辑:0,1,2三个下标,根据下标平分为3部分(任务对3取模,余数对应下标)
2
this.truckPlanFeign.pullUnassignedPlan(shardTotal, shardIndex)查询车辆计划,返回List<TruckPlanDto> truckDtoList
判断非空(空则return结束)
具体实现(看看)
车辆信息处理完毕后mq发消息通知,将数据库状态进行修改(未分配->已分配)
3 循环每一台车for (TruckPlanDto truckPlanDto : truckDtoList) {
3.1//校验车辆
if (ObjectUtil.hasEmpty(truckPlanDto.getStartOrganId(), truckPlanDto.getEndOrganId(),
truckPlanDto.getTransportTripsId(), truckPlanDto.getId())) {
log.error("车辆计划对象数据不符合要求, truckPlanDto -> {}", truckPlanDto);
continue;
}
3.2获取起始结束机构id获得redis key
//根据该车辆的开始、结束机构id,来确定要处理的运单数据集合
Long startOrganId = truckPlanDto.getStartOrganId();
Long endOrganId = truckPlanDto.getEndOrganId();
String redisKey = this.transportOrderDispatchMQListener.getListRedisKey(startOrganId, endOrganId);
3.3获取公平锁(避免分布式装车操作时,将一个用户的货装到不同的车次,当一辆车装满时仍有可能装到两个车)
//在 Redis 中生成了一个与资源相关的公平锁
String lockRedisKey = Constants.LOCKS.DISPATCH_LOCK_PREFIX + redisKey;
//通过 Redisson 客户端来获取锁
RLock lock = this.redissonClient.getFairLock(lockRedisKey);
3.4锁内计算运力
List<DispatchMsgDTO> dispatchMsgDTOList = new ArrayList<>();
try {
//锁定,一直等待锁,一定要获取到锁,因为查询到车辆的调度状态设置为:已分配
lock.lock();
//计算车辆运力、合并运单
this.executeTransportTask(redisKey, truckPlanDto.getTruckDto(), dispatchMsgDTOList);
} finally {
lock.unlock();
}
3.5//生成运输任务
this.createTransportTask(truckPlanDto, startOrganId, endOrganId, dispatchMsgDTOList);
4//发送消息通知base微服务车辆已经完成调度,进行状态修改
this.completeTruckPlan(truckDtoList);
代码
@Resource
private TransportOrderDispatchMQListener transportOrderDispatchMQListener;
@Resource
private StringRedisTemplate stringRedisTemplate;
@Resource
private RedissonClient redissonClient;
@Resource
private TruckPlanFeign truckPlanFeign;
@Resource
private MQFeign mqFeign;
@Value("${sl.volume.ratio:0.95}")
private Double volumeRatio;
@Value("${sl.weight.ratio:0.95}")
private Double weightRatio;
/**
* 分片广播方式处理运单,生成运输任务
*/
@XxlJob("transportTask")
public void transportTask() {
// 分片参数
int shardIndex = XxlJobHelper.getShardIndex();
int shardTotal = XxlJobHelper.getShardTotal();
//根据分片参数 2小时内并且可用状态车辆
// List<TruckPlanDto> truckDtoList = this.queryTruckPlanDtoList(shardIndex, shardTotal);
List<TruckPlanDto> truckDtoList = this.truckPlanFeign.pullUnassignedPlan(shardTotal, shardIndex);
if (CollUtil.isEmpty(truckDtoList)) {
return;
}
// 对每一个车辆都进行处理
// 为了相同目的地的运单尽可能的分配在一个运输任务中,所以需要在读取数据时进行锁定,一个车辆处理完成后再开始下一个车辆处理
// 在这里,使用redis的分布式锁实现
for (TruckPlanDto truckPlanDto : truckDtoList) {
//校验车辆计划对象
if (ObjectUtil.hasEmpty(truckPlanDto.getStartOrganId(), truckPlanDto.getEndOrganId(),
truckPlanDto.getTransportTripsId(), truckPlanDto.getId())) {
log.error("车辆计划对象数据不符合要求, truckPlanDto -> {}", truckPlanDto);
continue;
}
//根据该车辆的开始、结束机构id,来确定要处理的运单数据集合
Long startOrganId = truckPlanDto.getStartOrganId();
Long endOrganId = truckPlanDto.getEndOrganId();
String redisKey = this.transportOrderDispatchMQListener.getListRedisKey(startOrganId, endOrganId);
String lockRedisKey = Constants.LOCKS.DISPATCH_LOCK_PREFIX + redisKey;
//获取锁
RLock lock = this.redissonClient.getFairLock(lockRedisKey);
List<DispatchMsgDTO> dispatchMsgDTOList = new ArrayList<>();
try {
//锁定,一直等待锁,一定要获取到锁,因为查询到车辆的调度状态设置为:已分配
lock.lock();
//计算车辆运力、合并运单
this.executeTransportTask(redisKey, truckPlanDto.getTruckDto(), dispatchMsgDTOList);
} finally {
lock.unlock();
}
//生成运输任务
this.createTransportTask(truckPlanDto, startOrganId, endOrganId, dispatchMsgDTOList);
}
//发送消息通过车辆已经完成调度
this.completeTruckPlan(truckDtoList);
}
2.2.2、运单处理 executeTransportTask()
逻辑
1从队列右侧取订单this.stringRedisTemplate.opsForList().rightPop(redisKey)
判断非空(空则return结束)
2将订单数据转换为DispatchMsgDTO对象(比订单数据少,但更相关)
3计算加上redislist右侧这个订单货物的车辆总重量,总体积(注意写法,使用stream)
NumberUtil.add(NumberUtil.toBigDecimal(dispatchMsgDTOList.stream()
.mapToDouble(DispatchMsgDTO::getTotalWeight)
.sum()), dispatchMsgDTO.getTotalWeight());
4判断是否超出设定值(weightRatio为最大重量百分比,不能设置为最大重量,要有冗余)
NumberUtil.isGreaterOrEqual(大于等于)
超出将订单在redisList右侧push入(不在左侧,因为让其装货时间减少)。reuturn结束。
未超则加入集合
5递归调用 运单处理 executeTransportTask()。进行redisList中下一订单的处理
代码
private void executeTransportTask(String redisKey, TruckDto truckDto, List<DispatchMsgDTO> dispatchMsgDTOList) {
String redisData = this.stringRedisTemplate.opsForList().rightPop(redisKey);
if (StrUtil.isEmpty(redisData)) {
//该车辆没有运单需要运输
return;
}
DispatchMsgDTO dispatchMsgDTO = JSONUtil.toBean(redisData, DispatchMsgDTO.class);
//计算该车辆已经分配的运单,是否超出其运力,载重 或 体积超出,需要将新拿到的运单加进去后进行比较
BigDecimal totalWeight = NumberUtil.add(NumberUtil.toBigDecimal(dispatchMsgDTOList.stream()
.mapToDouble(DispatchMsgDTO::getTotalWeight)
.sum()), dispatchMsgDTO.getTotalWeight());
BigDecimal totalVolume = NumberUtil.add(NumberUtil.toBigDecimal(dispatchMsgDTOList.stream()
.mapToDouble(DispatchMsgDTO::getTotalVolume)
.sum()), dispatchMsgDTO.getTotalVolume());
//车辆最大的容积和载重要留有余量,否则可能会超重 或 装不下
BigDecimal maxAllowableLoad = NumberUtil.mul(truckDto.getAllowableLoad(), weightRatio);
BigDecimal maxAllowableVolume = NumberUtil.mul(truckDto.getAllowableVolume(), volumeRatio);
if (NumberUtil.isGreaterOrEqual(totalWeight, maxAllowableLoad)
|| NumberUtil.isGreaterOrEqual(totalVolume, maxAllowableVolume)) {
//超出车辆运力,需要取货的运单再放回去,放到最右边,以便保证运单处理的顺序
this.stringRedisTemplate.opsForList().rightPush(redisKey, redisData);
return;
}
//没有超出运力,将该运单加入到集合中
dispatchMsgDTOList.add(dispatchMsgDTO);
//递归处理运单
executeTransportTask(redisKey, truckDto, dispatchMsgDTOList);
}
2.2.3、消息通知生成创建运输任务createTransportTask()
mq通知work微服务进行数据库transportTask表数据创建,调度中心不参与数据库数据创建
逻辑
1根据需要查询数据
//获取运单集合id
List<String> transportOrderIdList = CollUtil.getFieldValues(dispatchMsgDTOList, "transportOrderId", String.class);
//司机列表确保不为null,为null则设置为empty
List<Long> driverIds = CollUtil.isNotEmpty(truckPlanDto.getDriverIds()) ? truckPlanDto.getDriverIds() : ListUtil.empty();
2传入到map中
3mq发消息
4删除reidsSet中的数据
代码
private void createTransportTask(TruckPlanDto truckPlanDto, Long startOrganId, Long endOrganId, List<DispatchMsgDTO> dispatchMsgDTOList) {
//将运单合并的结果以消息的方式发送出去
//key-> 车辆id,value -> 运单id列表
//{"driverId":123, "truckPlanId":456, "truckId":1210114964812075008,"totalVolume":4.2,"endOrganId":90001,"totalWeight":7,"transportOrderIdList":[320733749248,420733749248],"startOrganId":100280}
List<String> transportOrderIdList = CollUtil.getFieldValues(dispatchMsgDTOList, "transportOrderId", String.class);
//司机列表确保不为null
List<Long> driverIds = CollUtil.isNotEmpty(truckPlanDto.getDriverIds()) ? truckPlanDto.getDriverIds() : ListUtil.empty();
Map<String, Object> msgResult = MapUtil.<String, Object>builder()
.put("truckId", truckPlanDto.getTruckId()) //车辆id
.put("driverIds", driverIds) //司机id
.put("truckPlanId", truckPlanDto.getId()) //车辆计划id
.put("transportTripsId", truckPlanDto.getTransportTripsId()) //车次id
.put("startOrganId", startOrganId) //开始机构id
.put("endOrganId", endOrganId) //结束机构id
//运单id列表
.put("transportOrderIdList", transportOrderIdList)
//总重量
.put("totalWeight", dispatchMsgDTOList.stream()
.mapToDouble(DispatchMsgDTO::getTotalWeight)
.sum())
//总体积
.put("totalVolume", dispatchMsgDTOList.stream()
.mapToDouble(DispatchMsgDTO::getTotalVolume)
.sum())
.put("totalVolume", dispatchMsgDTOList.stream()
.mapToDouble(DispatchMsgDTO::getTotalVolume)
.sum())
.build();
//发送消息
String jsonMsg = JSONUtil.toJsonStr(msgResult);
this.mqFeign.sendMsg(Constants.MQ.Exchanges.TRANSPORT_TASK,
Constants.MQ.RoutingKeys.TRANSPORT_TASK_CREATE, jsonMsg);
if (CollUtil.isNotEmpty(transportOrderIdList)) {
//删除redis中set存储的运单数据
String setRedisKey = this.transportOrderDispatchMQListener.getSetRedisKey(startOrganId, endOrganId);
//需要转换为array数组格式。remove函数
this.stringRedisTemplate.opsForSet().remove(setRedisKey, transportOrderIdList.toArray());
}
}
2.2.4、completeTruckPlan()消息通知完成车辆计划
通过消息的方式通知base微服务,完成车辆计划(更改车辆状态为已调度)。
private void completeTruckPlan(List<TruckPlanDto> truckDtoList) {
//{"ids":[1,2,3], "created":123456}
Map<String, Object> msg = MapUtil.<String, Object>builder()
.put("ids", CollUtil.getFieldValues(truckDtoList, "id", Long.class))
.put("created", System.currentTimeMillis()).build();
String jsonMsg = JSONUtil.toJsonStr(msg);
//发送消息
this.mqFeign.sendMsg(Constants.MQ.Exchanges.TRUCK_PLAN,
Constants.MQ.RoutingKeys.TRUCK_PLAN_COMPLETE, jsonMsg);
}
2.3、xxl-job任务
编写完任务调度代码之后,需要在xxl-job中创建定时任务。地址:http://xxl-job.sl-express.com/xxl-job-admin/
第一步,设置执行器,AppName为:sl-express-ms-dispatch
注:AppName需和配置文件中相同。1找本地yml文件 2找nacos配置文件
第二步,创建任务,任务的分发方式为分片式调度(每5分钟执行一次):
注:JobHandler与代码中名称相同
创建完成:
2.4.2、添加车辆车次
启动微服务。如果没有服务,请先在Jenkins中进行部署。
docker start sl-express-gateway
docker start sl-express-ms-base-service
docker start sl-express-ms-transport-service
docker start sl-express-ms-web-manager
docker start sl-express-ms-driver-service
2.4.3、完整测试
过程复杂,未测试
3、运输任务
运输任务是针对于车辆的一次运输生成的,每一个运输任务都有对应的司机作业单。
5个运输任务,至少10个司机作业单(一个车辆至少配备2个司机)。
一个运输任务中包含了多个运单,是一对多的关系。
3.1、表结构(了解)
运输任务在work微服务中,主要涉及到2张表,分别是:sl_transport_task(运输任务表)
、sl_transport_order_task(运输任务与运单关系表)
。司机作业单是存储在司机微服务中的sl_driver_job(司机作业单)
表中。
CREATE TABLE `sl_transport_task` (
`id` bigint NOT NULL COMMENT 'id',
`truck_plan_id` bigint DEFAULT NULL COMMENT '车辆计划id',
`transport_trips_id` bigint DEFAULT NULL COMMENT '车次id',
`start_agency_id` bigint NOT NULL COMMENT '起始机构id',
`end_agency_id` bigint NOT NULL COMMENT '目的机构id',
`status` int NOT NULL COMMENT '任务状态,1为待执行(对应 未发车)、2为进行中(对应在途)、3为待确认(保留状态)、4为已完成(对应 已交付)、5为已取消',
`assigned_status` tinyint NOT NULL COMMENT '任务分配状态(1未分配2已分配3待人工分配)',
`loading_status` int NOT NULL COMMENT '满载状态(1.半载2.满载3.空载)',
`truck_id` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '车辆id',
`cargo_pick_up_picture` varchar(1000) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '提货凭证',
`cargo_picture` varchar(1000) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '货物照片',
`transport_certificate` varchar(1000) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '运回单凭证',
`deliver_picture` varchar(1000) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '交付货物照片',
`delivery_latitude` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '提货纬度值',
`delivery_longitude` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '提货经度值',
`deliver_latitude` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '交付纬度值',
`deliver_longitude` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '交付经度值',
`plan_departure_time` datetime DEFAULT NULL COMMENT '计划发车时间',
`actual_departure_time` datetime DEFAULT NULL COMMENT '实际发车时间',
`plan_arrival_time` datetime DEFAULT NULL COMMENT '计划到达时间',
`actual_arrival_time` datetime DEFAULT NULL COMMENT '实际到达时间',
`mark` varchar(50) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '备注',
`distance` double DEFAULT NULL COMMENT '距离,单位:米',
`created` datetime DEFAULT NULL COMMENT '创建时间',
`updated` datetime DEFAULT NULL COMMENT '更新时间',
PRIMARY KEY (`id`) USING BTREE,
KEY `transport_trips_id` (`truck_plan_id`) USING BTREE,
KEY `status` (`status`) USING BTREE,
KEY `created` (`created`) USING BTREE
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci ROW_FORMAT=DYNAMIC COMMENT='运输任务表';
CREATE TABLE `sl_transport_order_task` (
`id` bigint NOT NULL COMMENT 'id',
`transport_order_id` varchar(18) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci NOT NULL COMMENT '运单id',
`transport_task_id` bigint NOT NULL COMMENT '运输任务id',
`created` datetime DEFAULT NULL COMMENT '创建时间',
`updated` datetime DEFAULT NULL COMMENT '更新时间',
PRIMARY KEY (`id`) USING BTREE,
KEY `transport_order_id` (`transport_order_id`) USING BTREE,
KEY `transport_task_id` (`transport_task_id`) USING BTREE
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci ROW_FORMAT=DYNAMIC COMMENT='运单与运输任务关联表';
CREATE TABLE `sl_driver_job` (
`id` bigint NOT NULL COMMENT 'id',
`start_agency_id` bigint DEFAULT NULL COMMENT '起始机构id',
`end_agency_id` bigint DEFAULT NULL COMMENT '目的机构id',
`status` int DEFAULT NULL COMMENT '作业状态,1为待执行(对应 待提货)、2为进行中(对应在途)、3为改派(对应 已交付)、4为已完成(对应 已交付)、5为已作废',
`driver_id` bigint DEFAULT NULL COMMENT '司机id',
`transport_task_id` bigint DEFAULT NULL COMMENT '运输任务id',
`start_handover` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '提货对接人',
`finish_handover` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '交付对接人',
`plan_departure_time` datetime DEFAULT NULL COMMENT '计划发车时间',
`actual_departure_time` datetime DEFAULT NULL COMMENT '实际发车时间',
`plan_arrival_time` datetime DEFAULT NULL COMMENT '计划到达时间',
`actual_arrival_time` datetime DEFAULT NULL COMMENT '实际到达时间',
`created` datetime DEFAULT NULL COMMENT '创建时间',
`updated` datetime DEFAULT NULL COMMENT '更新时间',
PRIMARY KEY (`id`) USING BTREE,
KEY `task_transport_id` (`transport_task_id`) USING BTREE,
KEY `created` (`created`) USING BTREE
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci ROW_FORMAT=DYNAMIC COMMENT='司机作业单';
3.2、实现
3.2.1、监听消息
逻辑
1 收到消息,将消息转换JSONUtil.oarseObj()为JSONObject格式
.getJSONArray()获取driverIds
2 判断driverIds,空将状态修改为待人工分派,非空为已分派
CollUtil.isEmpty(driverIds) ? TransportTaskAssignedStatus.MANUAL_DISTRIBUTED : TransportTaskAssignedStatus.DISTRIBUTED
3创建运输任务,返回运输任务id
判断id,空return,非空继续
4 循环driverId:driverIds
运输任务id和司机id为参数,生成司机作业单
司机id转换为Long Convert.toLong(driverId);
代码
@Resource
private DriverJobFeign driverJobFeign;
@Resource
private TruckPlanFeign truckPlanFeign;
@Resource
private TransportLineFeign transportLineFeign;
@Resource
private TransportTaskService transportTaskService;
@Resource
private TransportOrderTaskService transportOrderTaskService;
@Resource
private TransportOrderService transportOrderService;
@RabbitListener(bindings = @QueueBinding(
value = @Queue(name = Constants.MQ.Queues.WORK_TRANSPORT_TASK_CREATE),
exchange = @Exchange(name = Constants.MQ.Exchanges.TRANSPORT_TASK, type = ExchangeTypes.TOPIC),
key = Constants.MQ.RoutingKeys.TRANSPORT_TASK_CREATE
))
public void listenTransportTaskMsg(String msg) {
//解析消息 {"driverIds":[123,345], "truckPlanId":456, "truckId":1210114964812075008,"totalVolume":4.2,"endOrganId":90001,"totalWeight":7,"transportOrderIdList":[320733749248,420733749248],"startOrganId":100280}
JSONObject jsonObject = JSONUtil.parseObj(msg);
//获取到司机id列表
JSONArray driverIds = jsonObject.getJSONArray("driverIds");
// 分配状态
TransportTaskAssignedStatus assignedStatus = CollUtil.isEmpty(driverIds) ? TransportTaskAssignedStatus.MANUAL_DISTRIBUTED : TransportTaskAssignedStatus.DISTRIBUTED;
//创建运输任务
Long transportTaskId = this.createTransportTask(jsonObject, assignedStatus);
if (CollUtil.isEmpty(driverIds)) {
log.info("生成司机作业单,司机列表为空,需要手动设置司机作业单 -> msg = {}", msg);
return;
}
for (Object driverId : driverIds) {
//生成司机作业单
this.driverJobFeign.createDriverJob(transportTaskId, Convert.toLong(driverId));
}
}
3.2.2、创建运输任务
逻辑
1 获取运输任务id,从json数据中.getLong(“truckPlanId”)
2 根据Id查询数据库中运输任务dto
3 设置运输任务entity的属性值,从json数据中
4 设置状态满载或空。根据有无运单。
此处可优化,根据查询的货物重量与货车total重量对比,添加一个半载状态
5 查询并设置路线距离
TransportLineSearchDTO transportLineSearchDTO = new TransportLineSearchDTO();
transportLineSearchDTO.setPage(1);
transportLineSearchDTO.setPageSize(1);
transportLineSearchDTO.setStartOrganId(transportTaskEntity.getStartAgencyId());
transportLineSearchDTO.setEndOrganId(transportTaskEntity.getEndAgencyId());
PageResponse<TransportLineDTO> transportLineResponse = this.transportLineFeign.queryPageList(transportLineSearchDTO);
TransportLineDTO transportLineDTO = CollUtil.getFirst(transportLineResponse.getItems());
if (ObjectUtil.isNotEmpty(transportLineDTO)) {
//设置距离
transportTaskEntity.setDistance(transportLineDTO.getDistance());
}
6 save entity实体 .transportTaskService.save()
7创建运输任务与运单之间的关系createTransportOrderTask()
8 返回运输任务id
代码
@Transactional
protected Long createTransportTask(JSONObject jsonObject, TransportTaskAssignedStatus assignedStatus) {
//根据车辆计划id查询预计发车时间和预计到达时间
Long truckPlanId = jsonObject.getLong("truckPlanId");
TruckPlanDto truckPlanDto = truckPlanFeign.findById(truckPlanId);
//创建运输任务
TransportTaskEntity transportTaskEntity = new TransportTaskEntity();
transportTaskEntity.setTruckPlanId(jsonObject.getLong("truckPlanId"));
transportTaskEntity.setTruckId(jsonObject.getLong("truckId"));
transportTaskEntity.setStartAgencyId(jsonObject.getLong("startOrganId"));
transportTaskEntity.setEndAgencyId(jsonObject.getLong("endOrganId"));
transportTaskEntity.setTransportTripsId(jsonObject.getLong("transportTripsId"));
transportTaskEntity.setAssignedStatus(assignedStatus); //任务分配状态
transportTaskEntity.setPlanDepartureTime(truckPlanDto.getPlanDepartureTime()); //计划发车时间
transportTaskEntity.setPlanArrivalTime(truckPlanDto.getPlanArrivalTime()); //计划到达时间
transportTaskEntity.setStatus(TransportTaskStatus.PENDING); //设置运输任务状态
// TODO 完善满载状态
if (CollUtil.isEmpty(jsonObject.getJSONArray("transportOrderIdList"))) {
transportTaskEntity.setLoadingStatus(TransportTaskLoadingStatus.EMPTY);
} else {
transportTaskEntity.setLoadingStatus(TransportTaskLoadingStatus.FULL);
}
//查询路线距离
TransportLineSearchDTO transportLineSearchDTO = new TransportLineSearchDTO();
transportLineSearchDTO.setPage(1);
transportLineSearchDTO.setPageSize(1);
transportLineSearchDTO.setStartOrganId(transportTaskEntity.getStartAgencyId());
transportLineSearchDTO.setEndOrganId(transportTaskEntity.getEndAgencyId());
PageResponse<TransportLineDTO> transportLineResponse = this.transportLineFeign.queryPageList(transportLineSearchDTO);
TransportLineDTO transportLineDTO = CollUtil.getFirst(transportLineResponse.getItems());
if (ObjectUtil.isNotEmpty(transportLineDTO)) {
//设置距离
transportTaskEntity.setDistance(transportLineDTO.getDistance());
}
//保存数据
this.transportTaskService.save(transportTaskEntity);
//创建运输任务与运单之间的关系
this.createTransportOrderTask(transportTaskEntity.getId(), jsonObject);
return transportTaskEntity.getId();
}
3.2.3、创建运单与运输任务关系实体
逻辑
1 获取运单id列表jsonObject.getJSONArray("transportOrderIdList")。判断非空
2 将每个运单ID o转成运单实体列表。在其中保存运输任务的id进行关联,并设置运单id
transportOrderIdList.stream().map(o -> {}).collect(Collectors.toList())
3 批量保存
4 批量标记运单为已调度状态
5 批量更新
代码
private void createTransportOrderTask(final Long transportTaskId, final JSONObject jsonObject) {
//创建运输任务与运单之间的关系
JSONArray transportOrderIdList = jsonObject.getJSONArray("transportOrderIdList");
if (CollUtil.isEmpty(transportOrderIdList)) {
return;
}
//将运单id列表转成运单实体列表
List<TransportOrderTaskEntity> resultList = transportOrderIdList.stream()
.map(transportOrderId -> {
TransportOrderTaskEntity transportOrderTaskEntity = new TransportOrderTaskEntity();
transportOrderTaskEntity.setTransportTaskId(transportTaskId);
transportOrderTaskEntity.setTransportOrderId(Convert.toStr(transportOrderId));
return transportOrderTaskEntity;
}).collect(Collectors.toList());
//批量保存运输任务与运单的关联表
this.transportOrderTaskService.batchSaveTransportOrder(resultList);
//批量标记运单为已调度状态
List<TransportOrderEntity> list = transportOrderIdList.stream()
.map(transportOrderId -> {
TransportOrderEntity transportOrderEntity = new TransportOrderEntity();
transportOrderEntity.setId(Convert.toStr(transportOrderId));
//状态设置为已调度
transportOrderEntity.setSchedulingStatus(TransportOrderSchedulingStatus.SCHEDULED);
return transportOrderEntity;
}).collect(Collectors.toList());
this.transportOrderService.updateBatchById(list);
}
3.3、测试
3.4、根据运输任务id查询运单
在TransportOrderService中,需要根据运输任务id查询运单列表,下面我们来完善pageQueryByTaskId()方法:
逻辑
1分页查询运单任务表(包含运输任务和运单)Page<1> 2 = new Page<>(page,pageSize)
2构建查询语句,等值查询任务id,like模糊查询运单id,已时间升序排列
注:TransportOrderTaskEntity::getTransportTaskId为数据库要查询的对象。taskId为查询的条件
LambdaQueryWrapper<TransportOrderTaskEntity> queryWrapper = new LambdaQueryWrapper<>();
queryWrapper.eq(ObjectUtil.isNotEmpty(taskId), TransportOrderTaskEntity::getTransportTaskId, taskId)
.like(ObjectUtil.isNotEmpty(transportOrderId), TransportOrderTaskEntity::getTransportOrderId, transportOrderId)
.orderByDesc(TransportOrderTaskEntity::getCreated);
3 分页查询
Page<TransportOrderTaskEntity> pageResult = transportOrderTaskService.page(
transportOrderTaskPage,quieryWrapper)
空时返回空白对象,return new PageResponse<>(pageResult)
4 根据运输任务运单表中运单id查询运单,查询运单信息转换为dto对象
List<Dto> dto = pageResult.getRecords().stream().map( x->{
new Entity()
entity = transportOrderMapper::select(x.getTransportOrderId)
return BeanUtil.toBean(entity,Dto.class)} )
.collect(Collectors.toList());
5 将dto对象进一步封装为PageResponse对象
PageResponse.<TransportOrderDTO>builder()
代码
/**
* 根据运输任务id分页查询运单信息
*
* @param page 页码
* @param pageSize 页面大小
* @param taskId 运输任务id
* @param transportOrderId 运单id
* @return 运单对象分页数据
*/
@Override
public PageResponse<TransportOrderDTO> pageQueryByTaskId(Integer page, Integer pageSize, String taskId, String transportOrderId) {
//构建分页查询条件
Page<TransportOrderTaskEntity> transportOrderTaskPage = new Page<>(page, pageSize);
LambdaQueryWrapper<TransportOrderTaskEntity> queryWrapper = new LambdaQueryWrapper<>();
queryWrapper.eq(ObjectUtil.isNotEmpty(taskId), TransportOrderTaskEntity::getTransportTaskId, taskId)
.like(ObjectUtil.isNotEmpty(transportOrderId), TransportOrderTaskEntity::getTransportOrderId, transportOrderId)
.orderByDesc(TransportOrderTaskEntity::getCreated);
//根据运输任务id、运单id查询运输任务与运单关联关系表
Page<TransportOrderTaskEntity> pageResult = this.transportOrderTaskService.page(transportOrderTaskPage, queryWrapper);
if (ObjectUtil.isEmpty(pageResult.getRecords())) {
return new PageResponse<>(pageResult);
}
//根据运单id查询运单,并转化为dto
List<TransportOrderDTO> transportOrderDTOList = pageResult.getRecords().stream().map(x -> {
TransportOrderEntity transportOrderEntity = this.getById(x.getTransportOrderId());
return BeanUtil.toBean(transportOrderEntity, TransportOrderDTO.class);
}).collect(Collectors.toList());
//构建分页结果
return PageResponse.<TransportOrderDTO>builder()
.page(page)
.pageSize(pageSize)
.pages(pageResult.getPages())
.counts(pageResult.getTotal())
.items(transportOrderDTOList)
.build();
}
4、司机入库
司机入库就意味着车辆入库,也就是此次运输结束,需要开始下一个运输、结束此次运输任务、完成司机作业单等操作。
司机入库的流程是在sl-express-ms-driver-service
微服务中完成的,基本的逻辑已经实现,现在需要我们实现运单向下一个节点的转运,即:开始新的转运工作。
4.1、业务实现(了解)
业务代码是在sl-express-ms-driver-service
微服务中。
核心逻辑
2.3查询运输任务
2.4根据状态判断任务是否已结束,不能再修改流转
//2.5修改运单流转节点,修改当前节点和下一个节点
//2.6结束运输任务,transportTaskFeign.completeTransportTask()
/3.修改所有与运输任务id相关联的司机作业单状态和实际到达时间
/**
* 司机入库,修改运单的当前节点和下个节点 以及 修改运单为待调度状态,结束运输任务
*
* @param driverDeliverDTO 司机作业单id
*/
@Override
@GlobalTransactional
public void intoStorage(DriverDeliverDTO driverDeliverDTO) {
//1.司机作业单,获取运输任务id
DriverJobEntity driverJob = super.getById(driverDeliverDTO.getId());
if (ObjectUtil.isEmpty(driverJob)) {
throw new SLException(DriverExceptionEnum.DRIVER_JOB_NOT_FOUND);
}
if (ObjectUtil.notEqual(driverJob.getStatus(), DriverJobStatus.PROCESSING)) {
throw new SLException(DriverExceptionEnum.DRIVER_JOB_STATUS_UNKNOWN);
}
//运输任务id
Long transportTaskId = driverJob.getTransportTaskId();
//2.更新运输任务状态为完成
//加锁,只能有一个司机操作,任务已经完成的话,就不需要进行流程流转,只要完成司机自己的作业单即可
String lockRedisKey = Constants.LOCKS.DRIVER_JOB_LOCK_PREFIX + transportTaskId;
//2.1获取锁
RLock lock = this.redissonClient.getFairLock(lockRedisKey);
if (lock.tryLock()) {
//2.2获取到锁
try {
//2.3查询运输任务
TransportTaskDTO transportTask = this.transportTaskFeign.findById(transportTaskId);
//2.4判断任务是否已结束,不能再修改流转
if (!ObjectUtil.equalsAny(transportTask.getStatus(), TransportTaskStatus.CANCELLED, TransportTaskStatus.COMPLETED)) {
//2.5修改运单流转节点,修改当前节点和下一个节点
this.transportOrderFeign.updateByTaskId(String.valueOf(transportTaskId));
//2.6结束运输任务
TransportTaskCompleteDTO transportTaskCompleteDTO = BeanUtil.toBean(driverDeliverDTO, TransportTaskCompleteDTO.class);
transportTaskCompleteDTO.setTransportTaskId(String.valueOf(transportTaskId));
this.transportTaskFeign.completeTransportTask(transportTaskCompleteDTO);
}
} finally {
lock.unlock();
}
} else {
throw new SLException(DriverExceptionEnum.DRIVER_JOB_INTO_STORAGE_ERROR);
}
//3.修改所有与运输任务id相关联的司机作业单状态和实际到达时间
LambdaUpdateWrapper<DriverJobEntity> updateWrapper = new LambdaUpdateWrapper<>();
updateWrapper.eq(ObjectUtil.isNotEmpty(transportTaskId), DriverJobEntity::getTransportTaskId, transportTaskId)
.set(DriverJobEntity::getStatus, DriverJobStatus.DELIVERED)
.set(DriverJobEntity::getActualArrivalTime, LocalDateTime.now());
this.update(updateWrapper);
}
4.2、运单流转
实现work微服务中com.sl.ms.work.service.impl.TransportOrderServiceImpl#updateByTaskId()
的方法
实现的关键点:
- 设置当前所在网点id为下一个网点id(司机入库,说明已经到达目的地)
- 解析完整运输链路,找出下一个转运节点,需要考虑到拒收、最后一个节点等情况
- 发送消息通知,参与新的调度或生成快递员的取派件任务
- 发送物流信息的消息(先TODO)
逻辑
1//通过运输任务id查询运单id列表,空则返回false
2//查询运单列表
3 for循环每一个运单
3.1设置当前所在机构id为下一个机构id
3.2解析完整的运输链路transportOrder.getTransportLine(),找到下一个机构id
3.3 找到节点列表
TransportLineNodeDTO transportLineNodeDTO = JSONUtil.toBean(transportOrder.getTransportLine(), TransportLineNodeDTO.class); List<OrganDTO> nodeList = transportLineNodeDTO.getNodeList();
3.4反向循环节点列表
注:这里反向循环主要是考虑到拒收的情况,a b c b a,从后往前找可以防止走重复
找到与当前机构相同id的node,往后加一位即为下一个机构id
找到路线最后的节点终点时修改状态为已到达,否则为待调度状态
for (int i = nodeList.size() - 1; i >= 0; i--) {
Long agencyId = nodeList.get(i).getId();
if (ObjectUtil.equal(agencyId, transportOrder.getCurrentAgencyId())) {
if (i == nodeList.size() - 1) {
//已经是最后一个节点了,也就是到最后一个机构了
nextAgencyId = agencyId;
transportOrder.setStatus(TransportOrderStatus.ARRIVED_END);
//发送消息更新状态
this.sendUpdateStatusMsg(ListUtil.toList(transportOrder.getId()), TransportOrderStatus.ARRIVED_END);
} else {
//后面还有节点
nextAgencyId = nodeList.get(i+1).getId();
//设置运单状态为待调度
transportOrder.setSchedulingStatus(TransportOrderSchedulingStatus.TO_BE_SCHEDULED);
}
break;
}
}
3.5设置下一个节点id
3.6//如果运单没有到达终点,需要发送消息到调度中心
//如果已经到达最终网点,需要发送消息进行快递员派送
4批量更新运单
代码
@Resource
private TransportTaskService transportTaskService;
@Override
public boolean updateByTaskId(Long taskId) {
//通过运输任务查询运单id列表
List<String> transportOrderIdList = this.transportTaskService.queryTransportOrderIdListById(taskId);
if (CollUtil.isEmpty(transportOrderIdList)) {
return false;
}
//查询运单列表
List<TransportOrderEntity> transportOrderList = super.listByIds(transportOrderIdList);
for (TransportOrderEntity transportOrder : transportOrderList) {
//获取将发往的目的地机构
OrganDTO organDTO = organFeign.queryById(transportOrder.getNextAgencyId());
//构建消息实体类
String info = CharSequenceUtil.format("快件到达【{}】", organDTO.getName());
String transportInfoMsg = TransportInfoMsg.builder()
.transportOrderId(transportOrder.getId())//运单id
.status("运送中")//消息状态
.info(info)//消息详情
.created(DateUtil.current())//创建时间
.build().toJson();
//发送运单跟踪消息
this.mqFeign.sendMsg(Constants.MQ.Exchanges.TRANSPORT_INFO, Constants.MQ.RoutingKeys.TRANSPORT_INFO_APPEND, transportInfoMsg);
//设置当前所在机构id为下一个机构id
transportOrder.setCurrentAgencyId(transportOrder.getNextAgencyId());
Long nextAgencyId = 0L;
//解析完整的运输链路,找到下一个机构id
TransportLineNodeDTO transportLineNodeDTO = JSONUtil.toBean(transportOrder.getTransportLine(), TransportLineNodeDTO.class);
List<OrganDTO> nodeList = transportLineNodeDTO.getNodeList();
//这里反向循环主要是考虑到拒收的情况,路线中会存在相同的节点,始终可以查找到后面的节点
//正常:A B C D E ,拒收:A B C D E D C B A
for (int i = nodeList.size() - 1; i >= 0; i--) {
Long agencyId = nodeList.get(i).getId();
if (ObjectUtil.equal(agencyId, transportOrder.getCurrentAgencyId())) {
if (i == nodeList.size() - 1) {
//已经是最后一个节点了,也就是到最后一个机构了
nextAgencyId = agencyId;
transportOrder.setStatus(TransportOrderStatus.ARRIVED_END);
//发送消息更新状态
this.sendUpdateStatusMsg(ListUtil.toList(transportOrder.getId()), TransportOrderStatus.ARRIVED_END);
} else {
//后面还有节点
nextAgencyId = nodeList.get(i+1).getId();
//设置运单状态为待调度
transportOrder.setSchedulingStatus(TransportOrderSchedulingStatus.TO_BE_SCHEDULED);
}
break;
}
}
//设置下一个节点id
transportOrder.setNextAgencyId(nextAgencyId);
//如果运单没有到达终点,需要发送消息到运单调度的交换机中
//如果已经到达最终网点,需要发送消息,进行分配快递员作业
if (ObjectUtil.notEqual(transportOrder.getStatus(), TransportOrderStatus.ARRIVED_END)) {
this.sendTransportOrderMsgToDispatch(transportOrder);
} else {
//发送消息生成派件任务
this.sendDispatchTaskMsgToDispatch(transportOrder);
}
}
//批量更新运单
return super.updateBatchById(transportOrderList);
}
4.3、测试
5、练习
难度系数:★★★☆☆
需求:阅读司机微服务中的【司机出库】业务功能,主要阅读代码逻辑如下:
- 理解多个司机只能有一个更新运单状态,其他只是可以修改自己的作业单状态
- 使用分布式事务确保业务的一致性
6、面试连环问
面试官问:
- 能说一下xxl-job的分片式调度是在什么场景下使用的吗?这样做的好处是什么?
支付结果,定时查询当前可派车辆进行运输任务的调度
- 不同的运单流转节点是不一样的,你们如何将运单合并?如何确保redis的高可用?
使用redis的List和Set
- 你们系统中,车辆、车次和路线之间是什么关系?车辆有司机数量限制吗?
路线上设置车次,每一个车次设置车辆计划,车辆计划与车和司机有关(车有营业执照,类型。司机有驾驶证,排版等),一车最少2个司机