feat(rag): 1시간 내 기사라도 유사도 부족(<0.55) 또는 직접 연관성 결여 시 자동 재스크래핑 트리거 구현
This commit is contained in:
@@ -436,13 +436,28 @@ object RagService {
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
val hasHotNews = searchResult?.matches()?.any { match ->
|
val cleanName = stockName.replace("(주)", "").trim()
|
||||||
val pubDate = match.embedded().metadata().getString("date")
|
val allMatches = searchResult?.matches() ?: emptyList()
|
||||||
isVeryRecentNews(pubDate, maxHours = 1)
|
val maxScore = allMatches.maxOfOrNull { it.score() } ?: 0.0
|
||||||
} ?: false
|
|
||||||
|
|
||||||
if (!hasHotNews) {
|
// 1시간 이내 + 해당 종목명 직접 포함 + 유의미한 유사도(0.55 이상) 기준 충족 여부 검사
|
||||||
println("🌐 [$stockName] 최근 1시간 내 분석된 뉴스가 없습니다. 실시간 스크래핑을 시작합니다.")
|
val validHotNews = allMatches.filter { match ->
|
||||||
|
val pubDate = match.embedded().metadata().getString("date")
|
||||||
|
val isRecent = isVeryRecentNews(pubDate, maxHours = 1)
|
||||||
|
val title = match.embedded().metadata().getString("title") ?: ""
|
||||||
|
val text = match.embedded().text()
|
||||||
|
val mentionsStock = title.contains(cleanName) || text.contains(cleanName)
|
||||||
|
val isHighScore = match.score() >= 0.55
|
||||||
|
|
||||||
|
isRecent && mentionsStock && isHighScore
|
||||||
|
}
|
||||||
|
|
||||||
|
if (validHotNews.isEmpty()) {
|
||||||
|
if (allMatches.isNotEmpty()) {
|
||||||
|
println("🔄 [$stockName] 1시간 내 기사가 DB에 있으나 유사도가 낮거나(최고 ${String.format("%.3f", maxScore)} < 0.55) 연관성이 부족하여 최신 기사를 재스크래핑합니다.")
|
||||||
|
} else {
|
||||||
|
println("🌐 [$stockName] 최근 1시간 내 분석된 뉴스가 없습니다. 실시간 스크래핑을 시작합니다.")
|
||||||
|
}
|
||||||
val corpInfo = DartCodeManager.getCorpCode(stockCode)
|
val corpInfo = DartCodeManager.getCorpCode(stockCode)
|
||||||
corpInfo?.let {
|
corpInfo?.let {
|
||||||
try {
|
try {
|
||||||
@@ -452,7 +467,8 @@ object RagService {
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
} else {
|
} else {
|
||||||
println("✅ [$stockName] 최근 1시간 내 기사가 DB에 존재하여 스크래핑을 건너뜁니다.")
|
val bestScore = validHotNews.maxOf { it.score() }
|
||||||
|
println("✅ [$stockName] 최근 1시간 내 고유사도(${String.format("%.3f", bestScore)}) 유효 기사가 DB에 존재하여 스크래핑을 건너뜁니다.")
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|||||||
Reference in New Issue
Block a user