Batch1 parsing 후 저장시 데이터 중복 문제 1. 스팀api의 appList를 받아서 파싱후 내db 에 저장하는 기능을 만듬 2. 정상 작동 확인 3. 블로그에 기록 후 잠듬 4. 다음날 파싱기능 수행 전에 테이블 row를 다 날리는 기능을 만듬 5. 정상 작동 확인 6. 어제 만든 파싱,저장 기능 불능 확인 (저장기능이 안되는거였다) 7. executeBatch() 기능에 addbatch 가 약15만5천번 수행 된다는것 확인 (총13MB 용량.. 15만개의 요청..)>> (27만개 였다) DB의 제한설정을 늘린다 or 요청을 나눠서 수행 한다 8. executeBatch 분할 실행 9. Duplicate entry '736800' for key 'PRIMARY' 에러 10. 분할 후 나머지 쿼리 실행에서 기존의 데이터를 다시 insert해서 난 .. 2023. 2. 28. 이전 1 다음
