Вход

Просмотр полной версии : Сайт FitsBank (банк фитов и их обработок)


monstr
06.01.2011, 20:55
Давно витала в воздухе идея кооперации усилий нескольких астрофотографов для получения лучших результатов, нежели при одиночном подходе.

Иногда это получалось, чаще - нет. А в то же время накоплено ой как немало сумм того же М<любого>, да и NGC<многие> тоже снимал почти каждый :).

Это есть идея номер 1: создать место, где я могу разместить свой суммарный fit, Вася Пупкин может залить свой, мы можем скачивать и обрабатывать суммы или просто чужие фиты.

Идея номер 2: создать место, где можно будет размещать жпеги вариантов обработок этих самых фитов. Причём много вариантов, именованных по автору и дате создания.

Итак, велкам :). Думаю, идея постепенно получит распространение и даст "выхлоп" в виде отличных обработок, сопоставимых с коллективной обработкой М51 у соседей.

http://astro.milantiev.com/fitsBank/
email для тестов (используется в качестве логина): ivan@ivanov.ru , пароль: ivan

Основные правила хранилища:


обязательная регистрация (пока не сделал страницу регистрации, только через меня. Сделаю на днях). Без регистрации доступен только просмотр списков и мелких (200х200 точек) превьюх жпегов;
заливаемый фит - это сумма калиброванных и регистрированных (выравненных) кадров до какой-либо обработки, не считая кропа и выравнивания фона, да косметики. Никаких уровней, кривых, деконволюций и других обработок!
фиты пакуются zip'ом и заливаются на сервер;
фиты должны быть 32 бит дробные. Можно цветные, можно чб, на выбор. Если проект предусматривает несколько файлов (к примеру: R, G и B), то заливаются в виде нескольких фит-файлов в одном зипе;
крайне желательно (в меру сил и возможностей), обрезать мусор, ровнять фон и всячески наводить порядок в заливаемом файле и снабжать комментариями, заполнять все понятные поля;

Информация о каждом залитом файле будет попадать к модератору (пока ко мне, а там посмотрим). Пока что публикация сразу после заливки, на совесть заливающего, если будут проблемы, переведу в премодерируемый режим.

Буду постепенно добавлять функции в интерфейс хранилища, но это мелочи, главное - идея :).

Пока что недельку на тесты и доделки, потом базу почищу и можно будет заливать и работать с реальными файлами.

monstr
06.01.2011, 20:59
Да, сервер стоит у меня дома на антресолях, места будет столько, сколько нужно.

gstas
07.01.2011, 17:35
Идея вроде хорошая ;)
Но мне как вебпрогеру немного глаза режет текущий интерфейс ;)

Несколько комментов по теме веба:
1) Авторизацию надо вынести на первый шаг.
Авторизовался, получаешь доступ к основному контенту.
2) Убрать режим ГОСТЯ (без регистрации), так проще и правильнее.
Зачем посторонних пускать в систему и допускать к плохому, но всё равно контенту.

monstr
07.01.2011, 23:46
Идея вроде хорошая ;)
Но мне как вебпрогеру немного глаза режет текущий интерфейс ;)

Несколько комментов по теме веба:
1) Авторизацию надо вынести на первый шаг.
Авторизовался, получаешь доступ к основному контенту.
2) Убрать режим ГОСТЯ (без регистрации), так проще и правильнее.
Зачем посторонних пускать в систему и допускать к плохому, но всё равно контенту.

Интерфейс там и правда, пока что ... кривоват :), назовём это первой версией.

Насчёт гостя - несогласен. С точки зрения начальной раскрутки он обязателен. Собственно, гость может:
- видеть списки;
- видеть превьюхи 200х200 (как будет готова страница инфо о жпеге и фите - будет ещё превьюха примерно 400х400).

Вроде, немного.

Ну, я ещё планирую сделать "мои инструменты", регистрацию на сайте и всё jquery разукрасить, да стилей чуток позже навесить. Я в дизайне и вёрстке не особо, так что помощь приветствуется. :)

monstr
08.01.2011, 00:37
Загрузил несколько фитов и их обработок для наглядности, а то мусор какой-то валялся.

MOHAX
08.01.2011, 01:45
Лучше бы FTP подняли, имхо

monstr
08.01.2011, 11:42
Лучше бы FTP подняли, имхо
Обоснованное мнение? Технически это не сложно.

У меня есть мнение, что веб лучше с точки зрения информационной насыщенности и наглядности. Те же превьюшки жпегов чего стоят - всё видно сразу о чём речь.

MOHAX
08.01.2011, 12:50
Технически это не сложно
FTP справится лучше с нагрузкой на сервер, чем PHP-скрипты (FITS все же не легковесный JPEG). Не нужно думать о безопасности скриптов. Можно прикрутить к FTP уже существующий движок фотогалереи, а не изобретать велосипед, как сейчас у вас.

monstr
08.01.2011, 16:25
FTP справится лучше с нагрузкой на сервер, чем PHP-скрипты (FITS все же не легковесный JPEG). Не нужно думать о безопасности скриптов. Можно прикрутить к FTP уже существующий движок фотогалереи, а не изобретать велосипед, как сейчас у вас.
Беда в том, что я профессиональный веб-программист :), поэтому со всей ответственностью пишу, что:
- любой готовый альбом будет в разы геморней адаптировать под свою задачу, нежели написать своё приложение;
- http куда лучше справится с большой нагрузкой, нежели ftp. Да и нет пока никакой нагрузки :). Чуть изменится процедура скачивания файлов - будет не скриптом, как сейчас, а временной ссылкой на физический файл вне дерева веб-сервера;
- веб и свой скрипт дают любые гибкие возможности по разграничению раздачи файлов (к примеру, если один из пользователей захочет раздавать свои файлы только группе своих друзей).

Насчёт безопасности - всё же проект планируется в первую очередь "для своих". Если наберётся с десяток активных участников, цель проекта будет достигнута.

monstr
20.01.2011, 10:08
Переставил оборудование. Теперь нормальный проц, куча памяти и, главное, 2Тб места.
Спасибо коллеге-ЛАстроному, Grey_ (http://www............../forum/index.php?action=profile;u=26246) за пару двухтеробайтных винтов и БП новому серверу!

Добабатываю интерфейс. Из последних доделок:
отдельная страница фитов с подробной по ним информацией отдельная страница жпегов с подробной по ним информацией, в том числе по списку из каких фитов собран жпег визуальные улучшения


Сегодня продолжу.

Ещё одно важное изменение - в хранилище планируется теперь выкладывать не только готовые фиты, но и RAW+калибровку, чтобы начинающие могли тренироваться калибровать, складывать, а не только обрабатывать.
Плюс это даст возможность посмотреть "как рисует" тот или иной инструмент и та, или иная камера.

Пожелания приветствуются!

monstr
20.01.2011, 10:09
FTP справится лучше с нагрузкой на сервер, чем PHP-скрипты (FITS все же не легковесный JPEG). Не нужно думать о безопасности скриптов. Можно прикрутить к FTP уже существующий движок фотогалереи, а не изобретать велосипед, как сейчас у вас.

Всвязи с расширением хранилища и планом приёма гигобайт равов всё же придётся разрешить альтернативную закачку по ftp, так как у многих ещё медленные и сбойные каналы, а http post не даёт возможности докачки на upload. Интерфейс будет расширен для обработки файлов, загруженных на FTP.

monstr
20.01.2011, 16:36
Первые результаты сложения. Мои М106 и Вячеслава (senao):
http://starlab.ru/showpost.php?p=384263&postcount=2568

Welcome обработчикам :)

gstas
22.01.2011, 23:29
Олег, мне кажется в todo list нужно добавить:
1) поиск по названию объекта
2) выдавать постранично содержимое хранилища
3) добавить фильты отображения

monstr
23.01.2011, 11:08
Олег, мне кажется в todo list нужно добавить:
1) поиск по названию объекта
2) выдавать постранично содержимое хранилища
3) добавить фильты отображения
Ты прав. П.1. сделал.
Страницы потом, пока мало данных, кмк.

А фильтры по каким критериям ты видишь? По типу телескопа, размаху fwhm и т.п.?

gstas
23.01.2011, 11:30
А фильтры по каким критериям ты видишь? По типу телескопа, размаху fwhm и т.п.?

ну типа того )

monstr
28.01.2011, 11:30
Добавил превьюхи почти ко всем загруженным фитам, чтобы видеть что качаешь.
Превью делается вручную, загружая фит в fitStacker, сохраняя в PNG с гаммой 40..55, уменьшая до 400 точек и переводя в жпег в фотошопе.
БЕЗ обработки.

К примеру, страница сегодня добавленного мною фита трио галактик , включая М105:

http://astro.milantiev.com/fitsBank/?action=object&fit=39

Трио галактик, включая M105 (объект: M105 NGC3384 NGC3389)

Скачать (http://astro.milantiev.com/fitsBank/?action=download&fit=39)
Файл добавлен: 2011-01-28 09:50:56. Добавил: Милантьев Олег
Файл модифицирован: 2011-01-28 11:30:01
Размер файла: 10.7 MB
Время накопления: 100 мин.
Угловой размер пикселя: 0.8
Снято на: Sky-Watcher 250/1200 + Televue Paracorr / Canon EOS 450Da
Место съёмки: Удалённая обсерватория, 100 км от МКАД на юго-запад
http://astro.milantiev.com/fitsBank/preview/39.jpg
Съёмка сквозь набегающие порой облака (запись погодника внутри.
Калибровка pixInsight, сложение fitStacker

monstr
31.01.2011, 16:28
Сделал возможность заливать файлы по FTP, потом они попадают в интерфейс следующим образом:

1. заливается файл по FTP (с докачкой). В перспективе авторизация по тому же email / пароль, пока "заходи кто хочешь" :). Заливаем готовый зип в папку upload. Работает докачка;
2. добавляем фит через интерфейс, как раньше, но вместо кнопки "обзор" и выбора файла с локального диска, файл выбирается из выпадающего списка рядом с кнопкой "обзор" под надписью "...или выберите файл, загруженный по FTP". Остальное без изменений.

Сделал эту фичу, так как заливал большие фиты M106: http://starlab.ru/showpost.php?p=385858&postcount=2606 . По HTTP у меня установлено ограничение в 250 метров на файл.

E-Paul
12.02.2011, 18:03
Случайно наткнулся на сайт. Быть может, кому-то будет интересно: http://archive.stsci.edu/getting_started.html (http://archive.stsci.edu/getting_started.html) .