Browse Source

价格导入

master
常熟吴彦祖 6 days ago
parent
commit
b57137ae73
  1. 6
      src/main/java/com/xujie/modules/sys/dao/SupplierPriceInitialImportV2Mapper.java
  2. 96
      src/main/java/com/xujie/modules/sys/service/impl/SysInitialImportServiceImpl.java
  3. 12
      src/main/java/com/xujie/modules/sys/vo/SupplierPriceInitialImportMissingPropertyVo.java
  4. 39
      src/main/resources/mapper/sys/SupplierPriceInitialImportV2Mapper.xml

6
src/main/java/com/xujie/modules/sys/dao/SupplierPriceInitialImportV2Mapper.java

@ -2,7 +2,6 @@ package com.xujie.modules.sys.dao;
import com.xujie.modules.supplier.data.SupplierPartTierPriceItemVo;
import com.xujie.modules.sys.vo.InitialImportCodeMappingVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportMissingPropertyVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportV2RowVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportV2TierPriceVo;
import org.apache.ibatis.annotations.Mapper;
@ -49,8 +48,9 @@ public interface SupplierPriceInitialImportV2Mapper {
/** 保存从临时表回读的数据,确保校验、价格保存、属性覆盖使用同一批内容。- rqrq */
List<SupplierPriceInitialImportV2RowVo> listStageRows();
/** 只校验 Excel 非空属性,属性存在性检查使用 NOLOCK。- rqrq */
List<SupplierPriceInitialImportMissingPropertyVo> listMissingProperties();
/** 预览/保存按物料批量无锁查询六种已有属性,每批最多 1000 个物料、加 site 共 1001 个参数。- rqrq */
List<InitialImportCodeMappingVo> listPropertyMappingsByPartNos(@Param("site") String site,
@Param("partNos") List<String> partNos);
/** 按暂存的去重供应商物料组合一次无锁读取当前价,不拼接 IN,也不新增绑定参数。- rqrq */
List<SupplierPriceInitialImportV2TierPriceVo> listCurrentTierPricesFromStage();

96
src/main/java/com/xujie/modules/sys/service/impl/SysInitialImportServiceImpl.java

@ -16,7 +16,6 @@ import com.xujie.modules.sys.vo.PartSkuInitialImportSaveVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportPreviewResultVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportRowVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportSaveVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportMissingPropertyVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportV2PreviewResultVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportV2RowVo;
import com.xujie.modules.sys.vo.SupplierPriceInitialImportV2SaveVo;
@ -182,9 +181,9 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
* @Description 按表头读取新版价格期初导入文件 - rqrq
* 前置条件:请求 site 非空,文件为 Excel,32 个表头存在且不能重复;允许附加其他列。
* 执行步骤:建立表头位置映射,读取真实 Excel 行号,校验数量、阶梯、文本长度和主数据,
* 再标记同供应商简称、同物料属性的冲突,供页面黄标和导出定位。
* 再标记同供应商简称、同物料属性的冲突,并检查非空属性记录是否存在,供页面黄标和导出定位。
* 文件规则:读取用户上传文件的第一个页签,不限制文件名和页签名;外部公式来源不可得时明确报错。
* 一致性与事务:预览只查询主数据,事务允许 30 分钟;IN 查询分批,不建临时表。
* 一致性与事务:预览只无锁查询主数据和属性记录,事务允许 30 分钟;IN 查询分批,不建临时表。
* 失败策略:文件/表头/公式读取错误终止预览,公式错误附中文原因和单元格位置;其他行错误返回 validationMessage。
*/
@Override
@ -232,12 +231,12 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
/**
* @Description 保存新版价格期初导入 - rqrq
* 业务目标:保留旧导入入口;V2 在保存前暂存并检查属性,价格明细相同不改价、不建镜像。
* 业务目标:保留旧导入入口;V2 在预览阶段检查属性,保存复核后暂存,价格明细相同不改价、不建镜像。
* 前置条件:site 来自请求,最多 2000 行;重新解析物料/供应商,不能依赖前端 valid 或编码。
* 执行步骤:1) 重做基础和冲突校验;2) 同连接建 # 临时表并分批暂存全部 Excel 内容;
* 3) 按物料汇总非空属性缺失,缺失时在业务写入前终止;4) 批量预读当前价后逐行保存,
* 执行步骤:1) 重做基础、冲突和非空属性存在性校验;2) 同连接建 # 临时表并分批暂存全部 Excel 内容;
* 3) 批量预读当前价后逐行保存,
* 同组合改价后清除预读结果,后续重复行重读数据库,保留原来的顺序和精度规则;
* 5) 去重供应商更新简称,去重物料覆盖六个属性文本;6) finally 清理临时表。
* 4) 去重供应商更新简称,去重物料覆盖六个属性文本;5) finally 清理临时表。
* 一致性与事务:全部业务更新共用本方法的事务和连接;任一步失败全部回滚,
* 临时表会话隔离,建表用普通 Statement,避免 SQL Server 预编译作用域提前删除临时表。
* 失败策略:主数据/冲突/缺属性汇总返回;业务保存错误保留真实 Excel 行号,清理错误不掩盖原异常。
@ -262,7 +261,7 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
String submitBy = resolveSubmitBy();
log.info("开始新版价格期初导入保存 - rqrq,site={},行数={}", site, data.getRows().size());
// ====== 1) 主数据、字段和重复冲突校验:失败时尚未创建临时表、尚未写业务表。- rqrq ======
// ====== 1) 复核预览的主数据、字段、冲突和属性存在性:失败时尚未创建临时表、尚未写业务表。- rqrq ======
validatePriceV2Rows(site, data.getRows());
List<String> validationErrors = new ArrayList<>();
for (SupplierPriceInitialImportV2RowVo row : data.getRows()) {
@ -283,19 +282,7 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
Math.min(offset + PRICE_V2_STAGE_BATCH_SIZE, data.getRows().size())));
}
// ====== 3) 非空属性存在性校验:汇总全部缺失项,任何缺失都不进入业务保存。- rqrq ======
List<SupplierPriceInitialImportMissingPropertyVo> missing =
supplierPriceInitialImportV2Mapper.listMissingProperties();
if (!missing.isEmpty()) {
List<String> messages = new ArrayList<>();
for (SupplierPriceInitialImportMissingPropertyVo item : missing) {
messages.add("Excel第" + item.getExcelRowNo() + "行,Item=" + item.getRawCode()
+ ",缺少属性 " + item.getFieldName() + "(" + item.getPropertyNo() + ")");
}
throw new RuntimeException("以下物料未维护对应属性,请先维护后重新导入:\n" + String.join("\n", messages));
}
// ====== 4) 批量预读当前价:暂存键直接 JOIN,避免每个组合单独查询及大 IN 参数列表。- rqrq ======
// ====== 3) 批量预读当前价:暂存键直接 JOIN,避免每个组合单独查询及大 IN 参数列表。- rqrq ======
List<SupplierPriceInitialImportV2RowVo> stagedRows = supplierPriceInitialImportV2Mapper.listStageRows();
// rqrq - 外层 key 为供应商编码、内层 key 为物料编码,忽略大小写及首尾空格;空列表表示无当前价。
Map<String, Map<String, List<SupplierPartTierPriceItemVo>>> currentPrices = new HashMap<>();
@ -332,7 +319,7 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
}
}
// ====== 5) 供应商按编码去重:同一供应商不跟随物料重复更新。- rqrq ======
// ====== 4) 供应商按编码去重:同一供应商不跟随物料重复更新。- rqrq ======
Map<String, SupplierPriceInitialImportV2RowVo> suppliers = new LinkedHashMap<>();
for (SupplierPriceInitialImportV2RowVo row : stagedRows) {
suppliers.putIfAbsent(normalizeLookupValue(row.getSupplierNo()), row);
@ -350,7 +337,7 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
primaryFailure = ex;
throw ex;
} finally {
// ====== 6) 清理会话临时表:属性缺失和业务失败同样进入,回滚也撤销本次建表。- rqrq ======
// ====== 5) 清理会话临时表:业务失败同样进入,回滚也撤销本次建表。- rqrq ======
try {
supplierPriceInitialImportV2Mapper.dropStageTable();
} catch (RuntimeException cleanupError) {
@ -531,9 +518,9 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
}
/**
* @Description 新版预览与保存共用的主数据、字段、冲突校验 - rqrq
* @Description 新版预览与保存共用的主数据、字段、冲突和属性存在性校验 - rqrq
* 执行步骤:批量解析 site 下 Item 和供应商全称,识别不存在/多编码,再校验数量、阶梯和长度;
* 按供应商编码检查简称冲突,按物料编码逐个检查六个属性冲突,全部返回逐行错误。
* 按供应商编码检查简称冲突,按物料编码逐个检查六个属性冲突,再批量检查非空属性记录,全部返回逐行错误。
* 一致性与事务:本方法不写数据库;保存调用时重新执行,不能信任前端 valid。
* 失败策略:保留 Excel 解析错误,行级错误累积,不因一条错误丢失其他行的定位。
*/
@ -647,6 +634,8 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
SupplierPriceInitialImportV2RowVo::getCoo, "同一物料的 COO 冲突");
markPriceV2Conflicts(rows, SupplierPriceInitialImportV2RowVo::getPartNo,
SupplierPriceInitialImportV2RowVo::getRefill, "同一物料的 refill 冲突");
// rqrq - 属性缺失在选文件预览时直接标黄;保存复核复用同一规则,不再等暂存后才检查。
validatePriceV2PropertyRecords(site, rows);
SupplierPriceInitialImportV2PreviewResultVo result = new SupplierPriceInitialImportV2PreviewResultVo();
result.setRows(rows);
result.setMissingItems(new ArrayList<>(missingItems));
@ -655,7 +644,60 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
}
/**
* 分批加载 Item/供应商全称映射;每批最多 1000 个 IN 参数,加 site 共 1001 个。- rqrq
* @Description 在预览和保存前批量检查六个非空物料属性是否已有记录 - rqrq
* 业务目标:选文件后立即返回缺失的字段和属性编号,空字段不要求存在属性记录,仍允许导入清空。
* 前置条件:RAW CODE 已按请求 site 解析,属性文本已统一 trim/空值;无法解析的物料保留原主数据错误。
* 执行步骤:1) 去重收集有非空属性的物料;2) 每批最多 1000 个物料无锁查询已有属性;
* 3) 将缺失属性逐项累积到所有相关 Excel 行,复用前端标黄、禁止保存和导出校验结果的处理。
* 一致性与事务:只 SELECT,不依赖临时表;保存重做查询,避免使用前端传回的旧校验结论。
* 失败策略:属性缺失作为行级错误返回,不中断其他行校验;数据库查询异常由外层统一处理。
*/
private void validatePriceV2PropertyRecords(String site, List<SupplierPriceInitialImportV2RowVo> rows) {
// ====== 1) 按规范化物料编码去重;没有任何待检查字段时不发空 IN 查询。- rqrq ======
Set<String> partNos = new LinkedHashSet<>();
for (SupplierPriceInitialImportV2RowVo row : rows) {
if (StringUtils.hasText(row.getPartNo())
&& (StringUtils.hasText(row.getFsc()) || StringUtils.hasText(row.getFscClaim())
|| StringUtils.hasText(row.getLeadFreePellet()) || StringUtils.hasText(row.getAwareDpp())
|| StringUtils.hasText(row.getCoo()) || StringUtils.hasText(row.getRefill()))) {
partNos.add(normalizeLookupValue(row.getPartNo()));
}
}
if (partNos.isEmpty()) {
// rqrq - 全部属性为空或物料尚未解析时,无需检查属性记录存在性。
return;
}
// ====== 2) key 为规范化物料编码,value 为该物料已有的六种属性编号;每批含 site 共 1001 个参数。- rqrq ======
Map<String, Set<String>> propertyRecords = loadPriceV2CodeMappings(partNos,
batch -> supplierPriceInitialImportV2Mapper.listPropertyMappingsByPartNos(site, batch));
// ====== 3) 同一物料只查询一次,错误仍逐行展示,保证不同供应商行都能定位和导出。- rqrq ======
for (SupplierPriceInitialImportV2RowVo row : rows) {
if (!StringUtils.hasText(row.getPartNo())) {
// rqrq - 无法确定物料时不附加属性缺失,避免掩盖 RAW CODE 不存在或多编码的原因。
continue;
}
Set<String> existing = propertyRecords.get(normalizeLookupValue(row.getPartNo()));
addPriceV2MissingProperty(row, existing, row.getFsc(), "fsc", "T0011");
addPriceV2MissingProperty(row, existing, row.getFscClaim(), "FSC claim", "T0012");
addPriceV2MissingProperty(row, existing, row.getLeadFreePellet(), "Lead free Pellet", "T0066");
addPriceV2MissingProperty(row, existing, row.getAwareDpp(), "AWARE DPP", "T0052");
addPriceV2MissingProperty(row, existing, row.getCoo(), "COO", "T0042");
addPriceV2MissingProperty(row, existing, row.getRefill(), "refill", "T0043");
}
}
/** 只对非空 Excel 属性报缺失,错误保存在对应行,既可预览也可导出。- rqrq */
private void addPriceV2MissingProperty(SupplierPriceInitialImportV2RowVo row, Set<String> existing,
String textValue, String fieldName, String propertyNo) {
if (StringUtils.hasText(textValue) && (existing == null || !existing.contains(propertyNo))) {
addPriceV2Error(row, "缺少属性 " + fieldName + "(" + propertyNo + "),请先维护后重新导入");
}
}
/**
* 分批加载 Item/供应商全称/物料属性映射;每批最多 1000 个 IN 参数,加 site 共 1001 个。- rqrq
* 累积全部查询结果后统一识别不存在和多编码,不能把分批结果当成独立校验结果。
*/
private Map<String, Set<String>> loadPriceV2CodeMappings(Set<String> lookupValues,
@ -669,7 +711,7 @@ public class SysInitialImportServiceImpl implements SysInitialImportService {
return priceV2CodeMappings(mappings);
}
/** 映射 key 为规范化后的 Item/全称,value 保存全部实际编码,用于识别多编码。- rqrq */
/** 映射 key 为规范化后的 Item/全称/物料编码,value 保存全部解析编码或已有属性编号。- rqrq */
private Map<String, Set<String>> priceV2CodeMappings(List<InitialImportCodeMappingVo> mappings) {
Map<String, Set<String>> result = new HashMap<>();
for (InitialImportCodeMappingVo mapping : mappings) {

12
src/main/java/com/xujie/modules/sys/vo/SupplierPriceInitialImportMissingPropertyVo.java

@ -1,12 +0,0 @@
package com.xujie.modules.sys.vo;
import lombok.Data;
/** 临时表校验出的缺失物料属性,供保存前汇总到前端。- rqrq */
@Data
public class SupplierPriceInitialImportMissingPropertyVo {
private Integer excelRowNo;
private String rawCode;
private String fieldName;
private String propertyNo;
}

39
src/main/resources/mapper/sys/SupplierPriceInitialImportV2Mapper.xml

@ -157,34 +157,17 @@
ORDER BY excel_row_no
</select>
<!-- rqrq - 先按物料去重检查非空属性,再映射回所有 Excel 行号,避免同物料多供应商重复查属性。 -->
<select id="listMissingProperties" resultType="com.xujie.modules.sys.vo.SupplierPriceInitialImportMissingPropertyVo">
WITH stage_parts AS (
SELECT DISTINCT site, part_no, fsc, fsc_claim, lead_free_pellet, aware_dpp, coo, refill
FROM #srm_supplier_price_import_v2 WITH (NOLOCK)
), missing_properties AS (
SELECT s.site, s.part_no, a.field_name, a.property_no
FROM stage_parts s
CROSS APPLY (VALUES
('T0011', 'fsc', s.fsc),
('T0012', 'FSC claim', s.fsc_claim),
('T0066', 'Lead free Pellet', s.lead_free_pellet),
('T0052', 'AWARE DPP', s.aware_dpp),
('T0042', 'COO', s.coo),
('T0043', 'refill', s.refill)
) a(property_no, field_name, text_value)
WHERE a.text_value IS NOT NULL
AND NOT EXISTS (
SELECT 1 FROM PartSubPropertiesValue p WITH (NOLOCK)
WHERE p.Site = s.site AND p.PartNo = s.part_no
AND p.RecordType = 'P' AND p.PropertiesItemNo = a.property_no
)
)
SELECT s.excel_row_no AS excelRowNo, s.raw_code AS rawCode,
m.field_name AS fieldName, m.property_no AS propertyNo
FROM #srm_supplier_price_import_v2 s WITH (NOLOCK)
INNER JOIN missing_properties m ON m.site = s.site AND m.part_no = s.part_no
ORDER BY s.excel_row_no, m.property_no
<!-- rqrq - 预览不建临时表,按去重物料分批查询已有属性,Java 只检查 Excel 非空字段并逐行返回错误。 -->
<select id="listPropertyMappingsByPartNos" resultType="com.xujie.modules.sys.vo.InitialImportCodeMappingVo">
SELECT DISTINCT PartNo AS lookupValue, UPPER(LTRIM(RTRIM(PropertiesItemNo))) AS resolvedCode
FROM PartSubPropertiesValue WITH (NOLOCK)
WHERE Site = #{site}
AND RecordType = 'P'
AND PropertiesItemNo IN ('T0011', 'T0012', 'T0066', 'T0052', 'T0042', 'T0043')
AND PartNo IN
<foreach collection="partNos" item="partNo" open="(" separator="," close=")">
#{partNo}
</foreach>
</select>
<!-- rqrq - 临时表已包含所有解析键;按组合去重后 JOIN,一次读取取代每行查当前价。 -->

Loading…
Cancel
Save