문제
어떤 열 또는 여러 열이 아래 오류를 발생시키는 지 파악하려고합니다. 타사 서비스에서 제공 한 수신 데이터에 대해 변경된 사항이 있으며 이제 SQL에 저장하려고하면 실패합니다.
Microsoft.EntityFrameworkCore.DbUpdateException : 항목을 업데이트하는 중 오류가 발생했습니다. 자세한 내용은 내부 예외를 참조하십시오. ---> System.Data.SqlClient.SqlException : 숫자를 데이터 유형 숫자로 변환하는 산술 오버 플로우 오류. 그 진술서는 만료되었습니다.
매우 간단한 흐름 :
- 타사 API를 JSON으로 읽기
- newtonsoft를 사용하여 EF 데이터 모델 클래스로 직접 변환
- DB에 레코드를 추가 한 후 저장하십시오.
데이터 구조는 다음과 같이 정의됩니다.
[JsonObject(MemberSerialization.OptIn)]
public class RatDbAttributes
{
[JsonProperty]
[StringLength(50)]
public string block_chain { get; set; } // varchar(50)
[JsonProperty]
[StringLength(50)]
public string block_reduction { get; set; } // varchar(50)
[JsonProperty]
[StringLength(50)]
public string block_reward { get; set; } // varchar(50)
[JsonProperty]
public double block_time { get; set; } // decimal(28,6)
[JsonProperty]
[StringLength(100)]
public string consensus_method { get; set; } // varchar(100)
[JsonProperty]
public decimal decimals { get; set; } // decimal(28,6)
[JsonProperty]
[StringLength(50)]
public string difficulty_retarget { get; set; } // varchar(50)
[JsonProperty]
[StringLength(200)]
public string genesis_address { get; set; } // varchar(200)
[JsonProperty]
[StringLength(100)]
public string hash_algorithm { get; set; } // varchar(100)
[JsonProperty]
[StringLength(50)]
public string mineable { get; set; } // varchar(50)
[JsonProperty]
public long p2p_port { get; set; } // bigint
[JsonProperty]
public long rpc_port { get; set; } // bigint
[JsonProperty]
[StringLength(200)]
public string token_role { get; set; } // varchar(200)
[JsonProperty]
public decimal @float { get; set; } // decimal(28,6)
[JsonProperty]
public decimal minted { get; set; } // decimal(28,6)
[JsonProperty]
public decimal total_supply { get; set; } // decimal(28,6)
[JsonProperty]
public decimal max_supply { get; set; } // decimal(28,6)
[JsonProperty]
[StringLength(133)]
public string wallet { get; set; } // varchar(133)
[JsonProperty]
[NotMapped]
public double genesis_timestamp { get; set; } // see below
[JsonIgnore]
public DateTime Genesis_TimeStamp { get { return genesis_timestamp.ToDateTime(); } set { genesis_timestamp = value.ToEpoch(); } }
// Foregin Key Relationship (1-to-1) and Primary Key
[JsonIgnore]
public long TokenMasterId { get; set; }
[JsonIgnore]
[ForeignKey("TokenMasterId")]
public RatDbTokenMaster TokenMaster { get; set; } //foreign key to Parent
}
genesis_timestamp 두 번 확인했는데 문제가 아닙니다 (double을 datetime으로 변환).
수신 실패 JSON 샘플 :
{"block_chain":""
,"block_reduction":""
,"block_reward":"0"
,"block_time":0.0
,"consensus_method":""
,"decimals":0.0
,"difficulty_retarget":""
,"genesis_address":""
,"hash_algorithm":""
,"mineable":"False"
,"p2p_port":0
,"rpc_port":0
,"token_role":""
,"float":0.0
,"minted":0.0
,"total_supply":0.0
,"max_supply":0.0
,"wallet":""
,"genesis_timestamp":0.0
}
수락 된 답변
배치가 실패 할 때 페일 오버 반복 저장을 만들었습니다. 이 클래스에 대해 데이터베이스 연결을 "전역"으로 만들었 기 때문에 부주의하게 문제가 발생했습니다. 레코드 세트를 추가하고 저장하려고 시도 (오류 팝) 한 다음 더 작고 작은 배치를 반복하여 문제가되는 레코드를 찾습니다. 문제는 반복하기 전에 문제가되는 레코드 세트를 제거 하지 않았다는 것입니다. 따라서 모든 반복은 DB 연결에서 오류 조건을 수행했습니다!
internal void IterateSave<TModel>(List<TModel> items) where TModel : class
{
using (LogContext.PushProperty("Data: Class", nameof(RatBaseCommandHandler)))
using (LogContext.PushProperty("Data: Method", nameof(IterateSave)))
using (LogContext.PushProperty("Data: Model", nameof(items)))
{
int max = items.Count;
int skip = 0;
int take = (max > 20) ? (max / 5) : 1;
int lastTake = take;
List<TModel> subItems = new List<TModel>();
while (skip <= max)
{
try
{
subItems = items.Skip(skip).Take(take).ToList();
Log.Verbose("Working {Max} | {Take} | {Skip}", max, take, skip);
skip += take;
_db.Set<TModel>().AddRange(subItems);
_db.SaveChanges();
}
catch (Exception ex)
{
/***** Was not removing the faulty record/recordset! *****/
_db.Set<TModel>().RemoveRange(subItems);
/***** Was not removing the faulty record/recordset! *****/
if (take == 1 && skip < max)
{
Log.Error(ex, "Error saving specific record in this data batch! {GuiltyRecord}", JsonConvert.SerializeObject(subItems));
if (skip >= max - 1)
{
depth--;
return;
}
}
else if (take > 1)
{
Log.Warning("Something is wrong saving this data batch! {RecordCount} Running a smaller batch to isolate.", take);
IterateSave(subItems);
}
}
}
}
}
이 두 줄이 추가되면 (주석에 주석 처리 된 섹션) 오류가 그대로 나타납니다!
이 데이터 배치에서 특정 레코드를 저장하는 중에 오류가 발생했습니다! "[{\"block_chain \ ": \"Ethereum \ ", \"block_reduction \ ": \"\ ", \"block_reward \ ": \"0 \ ", \"block_time \ ": 0.0, \"consensus_method \ ": \"\ ", \"decimals \ ": 18.0, \"difficulty_retarget \ ": \"\ ", \"genesis_address \ ": \"0x3520ba6a529b2504a28eebda47d255db73966694 \ ", \"hash_algorithm \ ": \"\ ", \ "mineable \": \ "False \", \ "p2p_port \": 0, \ "rpc_port \": 0, \ "token_role \": \ "\", \ "float \": 0.0, \ "박하 \ ": 60000000000000000000000000.0, \"total_supply \ ": 60000000000000000000000000.0, \"max_supply \ ": 60000000000000000000000000.0, \"wallet \ ": \"\ ", \"genesis_timestamp \ ": 0.0}]"Microsoft.EntityFrameworkCore.DbUpdateException : 오류가 발생했습니다. 항목을 업데이트하는 동안. 자세한 내용은 내부 예외를 참조하십시오. ---> System.Data.SqlClient.SqlException : 숫자를 데이터 유형 숫자로 변환하는 산술 오버 플로우 오류. 그 진술서는 만료되었습니다.
C #은 DECIMAL 데이터 유형에서 60000000000000000000000000.0을 처리 할 수 있지만 SQL은 DECIMAL (28,6)에 정의되어 있습니다. 6 자리 정밀도로 인해 10 ^ 22 값의 공간 만 남습니다.
(SQL은 이제 DECIMAL (38,6)을 처리 할 수있는 것으로 보입니다. 프로덕션 데이터를 잃지 않고 열 정의를 재생할 시간입니다.)
아래 라이선스: CC-BY-SA with attribution
와 제휴하지 않음 Stack Overflow