feat(rag): 1시간 내 기사라도 유사도 부족(<0.55) 또는 직접 연관성 결여 시 자동 재스크래핑 트리거 구현

This commit is contained in:
2026-11-18 17:13:06 +09:00
parent 815999196c
commit 7a95060804
+22 -6
View File
@@ -436,13 +436,28 @@ object RagService {
}
}
val hasHotNews = searchResult?.matches()?.any { match ->
val pubDate = match.embedded().metadata().getString("date")
isVeryRecentNews(pubDate, maxHours = 1)
} ?: false
val cleanName = stockName.replace("(주)", "").trim()
val allMatches = searchResult?.matches() ?: emptyList()
val maxScore = allMatches.maxOfOrNull { it.score() } ?: 0.0
if (!hasHotNews) {
// 1시간 이내 + 해당 종목명 직접 포함 + 유의미한 유사도(0.55 이상) 기준 충족 여부 검사
val validHotNews = allMatches.filter { match ->
val pubDate = match.embedded().metadata().getString("date")
val isRecent = isVeryRecentNews(pubDate, maxHours = 1)
val title = match.embedded().metadata().getString("title") ?: ""
val text = match.embedded().text()
val mentionsStock = title.contains(cleanName) || text.contains(cleanName)
val isHighScore = match.score() >= 0.55
isRecent && mentionsStock && isHighScore
}
if (validHotNews.isEmpty()) {
if (allMatches.isNotEmpty()) {
println("🔄 [$stockName] 1시간 내 기사가 DB에 있으나 유사도가 낮거나(최고 ${String.format("%.3f", maxScore)} < 0.55) 연관성이 부족하여 최신 기사를 재스크래핑합니다.")
} else {
println("🌐 [$stockName] 최근 1시간 내 분석된 뉴스가 없습니다. 실시간 스크래핑을 시작합니다.")
}
val corpInfo = DartCodeManager.getCorpCode(stockCode)
corpInfo?.let {
try {
@@ -452,7 +467,8 @@ object RagService {
}
}
} else {
println("✅ [$stockName] 최근 1시간 내 기사가 DB에 존재하여 스크래핑을 건너뜁니다.")
val bestScore = validHotNews.maxOf { it.score() }
println("✅ [$stockName] 최근 1시간 내 고유사도(${String.format("%.3f", bestScore)}) 유효 기사가 DB에 존재하여 스크래핑을 건너뜁니다.")
}
}