[Eva] Fix case-sensitivity in generate_levels (lowercase everywhere)

This commit is contained in:
2026-10-10 07:57:02 +00:00
parent c2c7366445
commit 735d9f51bc
+30 -13
View File
@@ -11,6 +11,15 @@ generate_levels.py — генератор уровней филвордов (wor
• LEVELS_PER_SIZE — dict: {5: 25, 6: 50, 7: 200, 8: 300}. • LEVELS_PER_SIZE — dict: {5: 25, 6: 50, 7: 200, 8: 300}.
• Перед генерацией удаляем все уровни размеров 5–8. • Перед генерацией удаляем все уровни размеров 5–8.
🔧 ФИКС (10.10.2026): регистр слов — работаем в lowercase,
grid_letters остаются UPPERCASE для UI.
Раньше скрипт сохранял слова в UPPERCASE, а csv_words хранит
их в lowercase → переводы не находились (ANY case-sensitive),
а в level_words появлялись дубли-близнецы по регистру.
Теперь: fetch_words/group_by_length/save_level — lowercase,
fetch_translations ищет через LOWER(word_pl),
а в grid_letters буквы пишем .upper() (только для отображения).
Логика: Логика:
1. Читает все слова из csv_words (A1+A2+B1), DISTINCT по word_pl. 1. Читает все слова из csv_words (A1+A2+B1), DISTINCT по word_pl.
Фильтр: длина 3..10 Unicode-символов. Фильтр: длина 3..10 Unicode-символов.
@@ -102,7 +111,8 @@ def group_by_length(words: list[str]) -> dict[int, list[str]]:
res: dict[int, list[str]] = {} res: dict[int, list[str]] = {}
seen = set() seen = set()
for raw in words: for raw in words:
w = raw.strip().upper() # 🔧 ФИКС (10.10.2026): работаем в lowercase (было .upper()).
w = raw.strip().lower()
if not w or w in seen: if not w or w in seen:
continue continue
seen.add(w) seen.add(w)
@@ -286,7 +296,9 @@ def build_level(
w = pool.pop() w = pool.pop()
for i, ch in enumerate(w): for i, ch in enumerate(w):
r, c = p[i] r, c = p[i]
letters[r][c] = ch # 🔧 ФИКС (10.10.2026): в grid_letters пишем UPPERCASE —
# только для отображения на поле. В БД слова остаются lowercase.
letters[r][c] = ch.upper()
words_out.append({"word": w, "cells": p}) words_out.append({"word": w, "cells": p})
return {"size": n, "letters": letters, "words": words_out} return {"size": n, "letters": letters, "words": words_out}
@@ -330,13 +342,14 @@ async def fetch_words(pool) -> list[str]:
for w in raw_words: for w in raw_words:
if not w: if not w:
continue continue
wu = w.strip().upper() # 🔧 ФИКС (10.10.2026): работаем в lowercase (было .upper()).
if not wu or wu in seen: wl = w.strip().lower()
if not wl or wl in seen:
continue continue
ln = word_length(wu) ln = word_length(wl)
if MIN_WORD_LEN <= ln <= MAX_WORD_LEN: if MIN_WORD_LEN <= ln <= MAX_WORD_LEN:
filtered.append(wu) filtered.append(wl)
seen.add(wu) seen.add(wl)
return filtered return filtered
@@ -350,13 +363,16 @@ async def fetch_translations(pool, words: list[str]) -> dict[str, dict[str, str]
return {} return {}
async with pool.acquire() as conn: async with pool.acquire() as conn:
# 🔧 ФИКС (10.10.2026): ищем без учёта регистра через LOWER(word_pl),
# иначе UPPERCASE-слова не находили переводы в csv_words (lowercase).
rows = await conn.fetch(""" rows = await conn.fetch("""
SELECT DISTINCT ON (word_pl) SELECT DISTINCT ON (LOWER(word_pl))
word_pl, translation_ru, translation_uk, translation_en LOWER(word_pl) AS word_pl,
translation_ru, translation_uk, translation_en
FROM csv_words FROM csv_words
WHERE level_code = ANY($1::text[]) WHERE level_code = ANY($1::text[])
AND word_pl = ANY($2::text[]) AND LOWER(word_pl) = ANY($2::text[])
ORDER BY word_pl ORDER BY LOWER(word_pl)
""", list(WORD_LEVELS), words) """, list(WORD_LEVELS), words)
return { return {
@@ -422,7 +438,8 @@ async def save_level(
# level_words — вставляем построчно. # level_words — вставляем построчно.
for w in words: for w in words:
word_pl = w["word"] # 🔧 ФИКС (10.10.2026): слово и ключ перевода — в lowercase.
word_pl = w["word"].lower()
trans = translations.get(word_pl, {}) trans = translations.get(word_pl, {})
await conn.execute(""" await conn.execute("""
INSERT INTO level_words INSERT INTO level_words
@@ -552,4 +569,4 @@ async def main() -> None:
if __name__ == "__main__": if __name__ == "__main__":
asyncio.run(main()) asyncio.run(main())