Новое в версии 0.2.4
- Added support for reasoning models. VScan now allows configuring the amount of tokens a config can spend on a task, and setting the reasoning effort to be used in the process.
- The conversation screen got a major rewamp. Now it offers detailed information about token usage of the entire conversation, as well as individual generated messages. If the model includes reasoning in its output, it can be displayed separately for each response. The conversation list now also supports accessibility ac
This is a little project of mine aiming to research how vision LLMs could help out blind people on travel and in their every-day life by substituting eyesight for various visual tasks. VScan turns your smartphone's camera into a device for visual perception. You can define various optical cognitive functions, like looking for objects, signs, evaluating a scene or simply mediating visual impressions. You can afterwards use these functions on the camera view, just like a sighted person would use their eyes to achieve a specific goal in the physical world.
Each cognitive tool consists of two major parts:
• The camera to be used - front / back, as well as camera parameters - resolution, flashlight etc.
• The prompts used for LLM processing. LLM is the bridge between raw pixel data and your interpretation of it, and in the user/system prompt, you can specify what exactly are you interested in for the particular function and how should it be communicated, as well as the LLM model that should be used.
Camera input in combination with an LLM processing prompt forms a cognitive function, which can be used to serve various visual tasks.
VScan is open-source software. Visit the project's
official repository to learn more about its background, motivation, specific usage examples and setup instructions.
Версии
Можно выбрать загрузку приложения в виде APK (доступно по ссылкам ниже), однако следует помнить, что при такой установке вы не сможете получать уведомления об обновлениях, и что это менее безопасный способ скачивания. Советуем установить приложение F-Droid и использовать его.
Скачать
-
arm64-v8a
armeabi-v7a
x86
x86_64
Для этой версии требуется Android 7.0 или новее.
Cобрана и подписана оригинальным разработчиком и гарантированно соответствует этому исходному коду.
Разрешения
-
фото- и видеосъемка
Когда приложение используется, оно может делать фотографии и снимать видео с помощью камеры.
-
Доступ к данным датчиков при высокой частоте дискретизации
Приложение сможет считывать данные датчиков на частоте более 200 Гц
-
неограниченный доступ к Интернету
Приложение сможет создавать сетевые сокеты и использовать различные сетевые протоколы. Так как браузер и другие приложения обеспечивают средства для отправки данных в Интернет, это разрешение необязательно для отправки данных в Интернет.
-
android.permission.READ_EXTERNAlSTORAGE
-
запись аудио
Когда приложение используется, оно может записывать аудио с помощью микрофона.
-
android.permission.WRITE_EXTERNAlSTORAGE
-
com.rastislavkish.vscan.DYNAMIC_RECEIVER_NOT_EXPORTED_PERMISSION
Скачать APK
6.7 МиБ
Подпись PGP
|
Журнал сборки
Новое в версии 0.2.3
- There is now a standalone editor for entering the system prompt and user prompt. This editor has a large text field, which should make it easy to work with long and complex prompts.
- Various UI improvements and bug fixes.
-
arm64-v8a
armeabi-v7a
x86
x86_64
Для этой версии требуется Android 7.0 или новее.
Cобрана и подписана оригинальным разработчиком и гарантированно соответствует этому исходному коду.
Разрешения
-
фото- и видеосъемка
Когда приложение используется, оно может делать фотографии и снимать видео с помощью камеры.
-
Доступ к данным датчиков при высокой частоте дискретизации
Приложение сможет считывать данные датчиков на частоте более 200 Гц
-
неограниченный доступ к Интернету
Приложение сможет создавать сетевые сокеты и использовать различные сетевые протоколы. Так как браузер и другие приложения обеспечивают средства для отправки данных в Интернет, это разрешение необязательно для отправки данных в Интернет.
-
android.permission.READ_EXTERNAlSTORAGE
-
запись аудио
Когда приложение используется, оно может записывать аудио с помощью микрофона.
-
android.permission.WRITE_EXTERNAlSTORAGE
-
com.rastislavkish.vscan.DYNAMIC_RECEIVER_NOT_EXPORTED_PERMISSION
Скачать APK
6.6 МиБ
Подпись PGP
|
Журнал сборки
