Skip to content

dump of the https://the-federation.info/mastodon list updated with self-descriptions and lists of banned instances

Notifications You must be signed in to change notification settings

dobrosketchkun/mastodondump

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

7 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Описание

Инструментарий для сбора данных по инстансам сети Mastodon.

Алгоритм работы

  • Получение первоначального списка
    Используя запрос из query.txt, получить список и часть метаданных из The Federation и сохранить результат в файл dump.json.

  • Перепаковка данных
    Запустить restructure.py, в результате чего будет создан файл restructured_dump.json.

  • Опрос инстансов
    Запустить threads_parse_data.py. Данный скрипт в многопоточном режиме опросит инстансы из файла restructured_dump.json для получения описания и списка забаненных инстансов и сохранит результат в файл full.json.

About

dump of the https://the-federation.info/mastodon list updated with self-descriptions and lists of banned instances

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages