Счётчик скачек MONERO
03084
Счётчик скачек MAGNETAR
0962

Рип e-shuushuu 2019-2020 полный + метаданные за все время [Art][Scans][Wallpapers] [2020] [JPG][PNG][GIF]

Ответить на тему
 
Автор Сообщение

star21 ®

Пол: Женский

Стаж: 11 лет

Сообщений: 262214

Откуда: Екатеринбург

Создавать темы 26-Июн-2022 14:07

[Цитировать]

Рип e-shuushuu 2019-2020 полный + метаданные за все время Тип раздачи: Art/Scans/Wallpapers
Год выпуска: 2020
Количество: 66.618
Формат: JPG, PNG, GIFОписание: e-shuushuu - однозначно самая кавайная и качественная имиджборда, которую можно рекомендовать
даже злым анихейтерам и детям всех возрастов. А вдруг подсядут ?Релиз завершает цепочку рипов (с учетом этого релиза общим объемом около 850 GB, миллион картинок)
https://rutracker.org/forum/viewtopic.php?t=5582710 (2018) 43 GB
https://rutracker.org/forum/viewtopic.php?t=5397445 (2017) 64 GB
https://rutracker.org/forum/viewtopic.php?t=5184361 (2016) 83 GB
https://rutracker.org/forum/viewtopic.php?t=4952787 (2015) 90 GB
https://rutracker.org/forum/viewtopic.php?t=4583098 (06.2013-2014) 101 GB
https://rutracker.org/forum/viewtopic.php?t=4462893 и
https://rutracker.org/forum/viewtopic.php?t=4575912 (06.2011-05.2013) 59 + 70 GB
https://rutracker.org/forum/viewtopic.php?t=3612068 (до 05.2011) 216 GB - с него все началось, 10+ лет назадРелиз содержит:
- собственно картинки за 2019-2020 годы, заархивированные по три папки на месяц (FastStone MaxView смотрит в архивах)
- таблицы метаданных (текст через табуляцию) о постах и их тегах с начала времен (в т.ч. содержащихся во всех предыдущих релизах)
- чуток скриптов для скачивания и преобразований в подарок мастерам DIYПо сравнению с прошлыми рипами поменялся инструмент скачивания и система именования файлов, теперь она соответствует
моей серии композитных рипов (https://rutracker.org/forum/viewtopic.php?t=5957382 и предшествующим), где e-shuushuu ушел в тень
на фоне намного более массивных (и существенно менее целомудренных) конкурентов.
Информативное имя файла "борда - ID - фендом или несколько ~ персонаж или несколько (автор)" позволяет извлекать
интересующие подмножества картинок из архивов или разархивированного дерева каталогов по шаблону.НИКАКИХ преобразований в изображениях не выполнялось.

Подробнее о дополнительных данных

ess_posts - информация о постах, которую удалось получить с сайта 1.030.423 строки (1.000.228 из них представлены в торрентах) Excel - фсё
POST_ID
POST_DT - дата
FILE_SIZE
IMG_FMT - JPEG / PNG / GIF по данным exiftool
FILE_MD5 - если есть в торрентах, по данным fciv, удобна для отслеживания кросс-постов между сайтами
IMAGE_SIZE - ШИРИНАхВЫСОТА (по факту exiftool, не всегда совпадает с данными сайта)
FAV_COUNT - количество "фаворитов" на сайте, может свидетельствовать и привлекательности / популярности картинки
FILE_NAME - имя файла в торрент-релизе
TORR_PATH - корневая папка соответствует корню торрента, последняя папка - имя архива, между ними (может быть) путь по структуре торрента
TAGS_GENERAL - общие теги, заключены в "скобки", "разделены" "пробелами"
TAGS_COPYR - произведения
TAGS_CHAR - персонажи
TAGS_ARTIST - авторыess_tags - раздерибаненные теги по произведениям, персонажам и авторам - 3.253.443 строки
POST_ID
TAG - собственно тег без скобок
TAG_CAT - 3=произведения 4=персонажи 1=авторы
TAG_RANK - порядковый номер тега данного типа в пределах данного постаОбращаю внимание, что качалка на питоне ess_grab.py (60 строк, простая как угол дома) приспособлена к работе по списку POST_ID
вычитываемых из текстового файла, поэтому достаточно разумным является вариант действий:
- закинуть оба массива данных в какую то базейку
- славно поковыряться в ней используя SQL
- результаты в виде списка(-ов) интересующих POST_ID скармливать качалке
Но, конечно же, можно скачать (и раздавать !) все релизы и держать их как в архивах, так и распакованными. Как я.
-- а кто у нас самый популярный персонаж из часто встречающихся ?
select d.tag, count(*) cnt, round(avg(favn)) favn
from ess_ld l
join ess_dt_ld d on l.id=d.id and tag_cat=4
group by d.tag
having count(*)>=100
order by 3 desc
fetch first 10 rows only
-- два первых места Chocola и Vanilla, ня !

Примеры изображений - одна из старейших kawaii image board в рекомендациях не нуждается

[Профиль] [ЛС]
Показать сообщения:    
Ответить на тему

Текущее время: 22-Ноя 01:38

Часовой пояс: UTC + 5



Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах
Вы не можете прикреплять файлы к сообщениям
Вы не можете скачивать файлы