Commit graph

28 commits

Author SHA1 Message Date
Андрей Пименов
f77fafd240 Fix adversarial code review defects 2026-08-19 03:53:25 +03:00
Andrew Pimenov
a56cc9a4f1 drop ru-specific wording from lyrics digest headers 2026-08-16 20:23:19 +03:00
Andrew Pimenov
93127e37d8 catch schema-incomplete ollama responses instead of crashing the batch 2026-08-16 20:23:19 +03:00
Andrew Pimenov
1c0f6928bf lyrics --all-languages flag to opt out of the ru filter 2026-08-16 19:50:35 +03:00
Andrew Pimenov
d8f4e16f14 lyrics and analyze commands 2026-08-16 19:45:01 +03:00
Andrew Pimenov
d0682f8341 render lyrics digest grouped by mood 2026-08-16 19:42:33 +03:00
Andrew Pimenov
8eae62fb63 lyrics aggregate block in digest.md 2026-08-16 19:40:28 +03:00
Andrew Pimenov
74fcb6736d resumable ollama analysis run with per-track writes 2026-08-16 19:37:57 +03:00
Andrew Pimenov
2b715d2a75 ollama call with schema-constrained output 2026-08-16 19:35:39 +03:00
Andrew Pimenov
010a4550ef lyrics analysis schema and cache helpers 2026-08-16 19:33:35 +03:00
Andrew Pimenov
f1731b4710 lyrics text cache for ru tracks 2026-08-16 19:31:55 +03:00
Andrew Pimenov
165aa4fabc ollama settings in config.toml 2026-08-16 19:26:50 +03:00
Andrew Pimenov
881e22c528 report: --extra means all extra columns again, add per-group flags
--extra alone now adds every extra column like before. Individual
--timestamp/--duration/--version/--album/--artist flags let you pick just
one group instead, and combine freely.
2026-08-11 01:42:20 +03:00
Andrew Pimenov
b991236ffa report: pick individual --extra column groups instead of all-or-nothing
--extra now takes group names (timestamp/duration/version/album/artist/all)
so you can add just what you need, e.g. --extra timestamp. Also split
README command lists into core vs. extra sections for readability.
2026-08-11 01:38:37 +03:00
Andrew Pimenov
5d4cab5d68 report: --order/--extra flags, added_at and artist stats in track cache
CSV can now keep source playlist order instead of forced playlist grouping,
and optionally include added_at/duration_ms/release_date/artist rating from
the API that were previously fetched but discarded.
2026-08-11 01:25:51 +03:00
Andrew Pimenov
188fcc8b20 accept lk.-prefixed playlist uuids in --source links
Personal playlist links (e.g. "liked tracks" shared via the web player)
use a "lk.<uuid>" playlist_uuid, not a bare uuid - confirmed live via
client.playlist(): the prefix is part of the id itself, not something
to strip. Found by testing --source against a real link.
2026-08-09 11:59:39 +03:00
Andrew Pimenov
ff452b0162 add --source flag to read/sort an arbitrary playlist by link
report/apply/digest can now point at any Yandex Music playlist via a
share link instead of only the account's likes. Fetches the playlist's
tracks and artist genres straight into memory (no disk cache, nothing
persisted) and feeds them through the existing build_rows/render_digest/
apply_classification pipeline. apply supports --label to keep a foreign
playlist's tracks in separate genre playlists instead of merging them
into your own. Closes a gap where UnauthorizedError went uncaught anywhere.
2026-08-09 11:59:39 +03:00
Andrew Pimenov
187c30b4ab add digest command for a compact library summary
Aggregates liked tracks into top artists, genres, decades and top albums
with fixed size ceilings instead of a per-track dump, so it can be pasted
into an LLM chat regardless of library size. Fully offline - reads only
the existing cache, no Client/network needed. Adds album_title/year to
the track cache (one-time re-fetch) to support the decade and album views.
2026-08-09 11:59:39 +03:00
Andrew Pimenov
ac955ea35a add dedupe command to remove already-created duplicate track ranges
Playlist deletes are positional (from/to index), so a network error
during dedupe just aborts that playlist instead of retrying blindly -
indices may have already shifted. Re-running dedupe is safe since it
recomputes ranges from the live playlist state each time.
2026-07-16 16:28:21 +03:00
Andrew Pimenov
55b3ee832e harden playlist read against None response from users_playlists
client.users_playlists(kind) silently returns None on any response-parse
failure, not just when the playlist genuinely doesn't exist - this isn't
an exception, so with_retries doesn't catch it. Previously this was
treated as "playlist is empty", which risked re-inserting everything on
top of existing tracks. Now retry with backoff and raise instead of
guessing.
2026-07-16 16:27:01 +03:00
Andrew Pimenov
1c814830e5 fix apply always re-duplicating tracks on every re-run
track_key compared "id:albumId" against playlist track_id, but Yandex
never echoes albumId back for playlist entries (always None on read) -
so the existing-tracks check could never match anything, and every
apply run re-inserted the whole account on top of itself.
2026-07-16 16:22:04 +03:00
Andrew Pimenov
384095f496 skip tracks without album on insert, stop retrying BadRequestError
apply --yes падал целиком на первом же самозалитом/пиратском треке без
альбома (105 из 1984) - Яндекс отвечает BadRequestError (wrong-json),
т.к. albumId обязателен, а with_retries лечил это как временный сетевой
сбой и вслепую повторял заведомо безнадёжный запрос 4 раза. Теперь
BadRequestError (как и NotFoundError) не ретраится нигде - это
окончательный ответ сервера, а не таймаут. Треки без album_id
пропускаются проактивно с понятным сообщением, а неожиданный
BadRequestError на отдельном треке больше не прерывает весь прогон -
пропускается со счётчиком, остальные треки обрабатываются дальше.
2026-07-06 15:06:07 +03:00
Andrew Pimenov
0902d86bcd classify tracks by combined track + artist genre signals
Раньше жанр брался только с альбома (одна строка, часто общая:
rock/alternative/pop) - разные по звучанию артисты сваливались в одну
крупную корзину. Теперь classify_track сводит жанр трека и жанры
артиста (client.artists(), несколько тегов на артиста) на уровне
под-жанра: при согласии сигналов или отсутствии одного из них берём
имеющийся; при конфликте - если альбомный тег зонтичный (GENERIC_SLUGS)
доверяем артисту, если точный - треку (вероятный осознанный эксперимент
артиста в другом жанре). Один и тот же артист с разными по духу треками
теперь раскладывается по разным плейлистам.

Под-жанровые группы меньше config.small_group_min схлопываются в
родительскую крупную корзину (report.build_rows, двухпроходно,
без циклов - coarse_of детерминирована от fine).

Попутно: artist_ids трека может быть None (артист без привязки к
каталогу Яндекса, встречается у стороннего/пиратского аплоада) - раньше
это улетало в client.artists() как строка "None" и валилось
BadRequestError на батче; теперь такие id отфильтровываются на записи
и дополнительно на чтении кэша.
2026-07-06 14:26:49 +03:00
Andrew Pimenov
b93ac0d04a fix fetch caching tracks under wrong key, causing false stale purge
Кэш ключевался по track.track_id, пересчитанному из albums[0] вернувшегося
Track - а не по исходному id из списка лайков. Для трека, доступного на
нескольких альбомах, "основной" альбом в ответе tracks() может отличаться
от того, под которым трек лайкнут. Из-за этого 138 треков из ~1984
кэшировались под несовпадающим ключом и тут же вычищались как "больше не
лайкнутые" - при том что реально лайкнуты. Теперь кэшируем по исходному
id из likes.tracks_ids, сопоставляя по позиции в батче.
2026-07-06 12:16:14 +03:00
Andrew Pimenov
a8dd8d3bc8 fix ROOT_BUCKET to use verified genre roots instead of guessed slugs
Живой каталог client.genres() показал, что настоящий корень для рока -
"allrock" (title "Рок"), а не "rock", как было угадано изначально. Из-за
этого весь рок (559 из ~1900 треков, почти треть библиотеки) молча падал
в "Разное". Таблица переписана по полному списку из 34 реальных корней
(cache/genre_catalog.json), а не по предположениям об именах слагов.
2026-07-06 12:15:27 +03:00
Andrew Pimenov
f69d961064 fix duplicate track/playlist inserts on network timeout
users_playlists_insert_track и users_playlists_create - операции записи:
таймаут не значит, что запрос не дошёл до сервера. Прошлый фикс слепо
повторял такой вызов при NetworkError, и если сервер уже применил
вставку (а ответ просто потерялся), трек добавлялся в плейлист второй
раз. Теперь при сетевой ошибке сначала перепроверяется фактическое
состояние плейлиста/списка плейлистов, и повтор происходит только если
трек/плейлист там правда ещё отсутствует.
2026-07-06 12:04:18 +03:00
Andrew Pimenov
942c2d19e4 retry network errors and raise request timeout
Медленная/нестабильная сеть до api.music.yandex.net роняла весь процесс
при первом же таймауте (5с по умолчанию у библиотеки). Добавлен
with_retries с экспоненциальной паузой на всех сетевых точках входа
(fetch, language, genres, apply, client.init), таймаут запроса поднят
до 20с (настраивается в config.toml). Заодно поправлен скрытый баг:
language.py раньше кэшировал таймаут как "текста нет" навсегда -
теперь только настоящий NotFoundError трактуется так.
2026-07-06 10:05:22 +03:00
Andrew Pimenov
353be65e3a init: сортировка лайков Яндекс.Музыки по жанру и языку
CLI на yandex-music (device-flow auth, fetch/report/apply), жанр через
реальное дерево client.genres(), язык гибридом (track_supplement + алфавит).
2026-07-06 09:49:36 +03:00