Читалка + вопросы про чтение fb2

Добрый день всем!

Есть на маках проблемка. Ни одной читалки fb2. Решил я её поправить, получается примерно следующее: http://exception.jdnevnik.com/.products__job

Пишется всё на Java и цель - сделать порты в дальнейшем на всякие портативные устройства вместе с большими братьями. Сейчас, понятно, это все работает всего лишь под Mac/Windows/Linux/FreeBSD/Solaris.

В процессе возникла интересная проблема, которую хочется обсудить.

Дело в том, что FB2 - великолепный формат для библиотеки. Он отлично индексируется, имеет все нужные атрибуты книжки и так далее. Но для чтения он, скажем прямо, не подходит:
- обычно читаются зазипованные книжки. Зип используется обычный, не потоковый. Значит нужно распаковать прежде чем читать.
- сам формат (ссылки, изображения) - подразумевает произвольный доступ к файлу, а не последовательный. В результате чего нужно придумывать всякие решения (порой достаточно нетривиальные) для того, чтобы читать fb2 напрямую при ограничениях памяти/скорости процессора (например, телефоны)

Есть предложение. Наряду с fb2, как форматом каталогизации книг, придумать формат для чтения книг. Предполагаю, что это должен быть некий бинарный формат, ко всему прочему сжатый потоковым архивом (тем же блочным зипом например).

Интересно ли такое предложение? У меня в программе наметки такого формата уже есть, я готов выдать (в любом случае в описании API это будет) черновой вариант такого формата и требований к нему. Но, если это никому не нужно - это останется внутри у меня. Нужно - значит буду выкладывать.

Спасибо за внимание. Не считайте за рекламу - прога бесплатная и ссылка дается исключительно в целях информации.

Не, вряд ли кому сейчас интересно обсуждать новый двоичный формат. Их уже столько напридумано - palm pdb (и его производные plucker и mobiocket), tcr..
Их придумывали когда память считали не килобайты. Сейчас не модно.
Ну придумаешь свой формат, нужно делать конвертор в него, где-то его запускать.. Тогда уж проще конвертировать в уже давно существующий и отработанный.

Вот обсудить читалку fb2 на жабе - интересно.
Вот это: http://vtd-xml.sourceforge.net видел? Имхо идеально подходит именно для этого случая. Оверхид по памяти не больше полутора от размера файла, скорость на порядок больше чем у DOM.
Если доступная память в районе пять-десять мегабайт (что по нынешним временам немного), то вполне может работать без тормозов даже на жабе.

Mike Sinkovsky
Я использую не построитель DOM, а некий аналог SAX-парсера, точнее StAX. У него вообще только буфер есть, который на сложных файлах увеличивается до 64 килобайт (больше пока не видел).

А если интересно обсудить - то всегда за. alex -жЫвотное- jdnevnik -точка- com.

Нет. То, что исходный формат - fb2, даже не интересно спорить. Как формат, в котором должны храниться книги в библиотеке - это почти идеал.

Но вот для нормального, потокового чтения он не годится. И потому что картинки большие для мобильников часто, и потому что нужно бегать туда-обратно для того, чтобы, например, нарисовать картинку, и потому что просто обратное итерирование (просмотр предыдущей страницы - стандартная задача, еще интереснее задача перехода по закладке) внутри XML - задача не из простых. Ведь нужно восстановить стиль, например.

И именно из этих побуждений хочется сделать формат. Он будет нередактируемым. Хочется читать на ПК - можно конвертить на лету и "читать FB2". А хочется там, где плохо с памятью (тот же мобильник) - конвертим и читаем файл в этом формате.

Со временем телефоны и КПК - точно совместятся в одно. И непонятно, какие там будут возможности.

Опять же. Если выпускать платную книгу - можно будет этот бинарный формат закриптовать с достаточной легкостью. Криптование - потоковая операция, опять будет очень и очень хорошо. Но это сильно теория, так далеко я не заглядываю.

Можно говорить более конкретно, я могу выдать формат в принципе, нужно всего лишь день-два на подготовку.

Marina_Ch
Не хочу я обратно преобразовывать. Я хочу читать прямо вот это, что преобразовал. Ещё раз. FB2 - для каталогизации и хранения. Новый формат - для чтения, когда каталог не нужен. Например:

- каталог - на компе. Там хороший каталогизатор, всё в FB2...
- взял, воткнул КПК. Отметил в каталоге: "Хочу читать это, это и этого автора это". Оно конвертнуло, и скинуло на КПК (телефон, iPod, iPhone, ляляля). Всё. Там - читаем и радуемся. Места занимает меньше. Ведь при чтении нам наплевать на все эти тэги (имеется в виду дескрипшн например) и всё остальное. Стили - сохранить очень просто получается. А память не резиновая. У меня на Acer N311 - 8 метров свободно после загрузки ОС и основных программ... Это разве много? Тут даже XML не всякий прочтешь с картинками.

Marina_Ch
Грубо.

Все нормальные читалки многоформатные - преобразуют всё что угодно во внутренний формат и его уже читают.

Предложение. Преобразовать и сохранить вот так. А потом считывать не исходный fb2, а этот, уже преобразованный. И читать его. Преобразовали один раз, и читаем.

Следующий шаг. Не нужно считывать весь файл для чтения (как это нужно при наличии fb2), нужно считывать только ту страницу, что читаем (как это возможно в "правильном формате" для чтения). Возможно с чуть-чуть до и после. Это позволит читать книжки на чем угодно, вплоть до совсем калькуляторов.

Зачем при этом преобразовывать ообратно? Оригинал FB2 - остается, никуда не девается.

Все равно не понял зачем велосипед изобретать. Чем существующие велосипеды не устраивают? Plucker, TCR, .mobi смотрел?
Это если хочется на велосипеде.

Но лично я ни во что конвертировать точно не буду, если девайс не может сам скачать с фикшенбука или альдебарана и сразу читать - в сад такой девайс. Сейчас выбор большой. И будет увеличиваться (надеюсь).
Не буду я компьютер включать специально для запуска конвертора. Потому читаю в AlReader - он читает всё (что мне нужно).

По поводу парсеров - SAX и аналоги тут вообще не конкуренты, они структуру не хранят. Вот и приходится самому изобретать. А VTD создает индексированный двоичный xml в памяти, причем работает со скоростью сопоставимой с SAX. Потом по нему можно перемещаться вперед-назад, по закладкам и т.п. В общем все достоинства xml без недостатков DOM.

Еще раз, для КПК новый формат не нужен. На КПК прекрасно читается fb2 ридерами Haali и AlReader.
Настройка отображения просто необходима - шрифт, цвет, элементы книги и выделения. Одно дело читать на LCD, другое на eInk. Да и в description я, например, нередко заглядываю. Так что для этих устройств никакого формата, кроме fb2 не надо и не будет востребован.
Так что тема касается только телефонов, да и то, для смартфонов уже есть тот же AlReader, который прекрасно читает fb2. Остаются дешевые телефоны без операционки. Вот о них и надо говорить.

Добавлено спустя 2 минуты: