Files
rkllm-gradio-server/README.md
2026-02-03 18:31:42 +07:00

64 lines
2.1 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# Инструкция по запуску и использованию Gradio на платформе Rockchip RK3588
## Установка и запуск проекта
### Установка Docker и Docker Compose
Для запуска проекта вам потребуется Docker и Docker Compose. Установите их по следующим инструкциям:
- [Docker](https://docs.docker.com/install/)
- [Docker Compose](https://docs.docker.com/compose/install/)
### Сборка Docker Compose
1. Склонируйте репозиторий и перейдите в директорию проекта:
```bash
git clone https://github.com/DrHo1y/rkllm-gradio-server
cd rkllm-gradio-server
```
2. Запустите сборку проекта:
```bash
docker compose build
```
### Запуск проекта
1. Откройте терминал и перейдите в директорию, где находится файл `docker-compose.yml`.
2. Запустите проект с помощью команды:
```bash
docker compose up -d
```
Команда `-d` запускает контейнеры в фоновом режиме.
### Завершение работы проекта
Чтобы остановить проект, выполните следующую команду:
```bash
docker compose down
```
## Использование проекта
### Запуск приложения
После успешного запуска проекта вы можете открыть браузер и перейти по адресу:
```
http://localhost:8080
```
### Доступные ресурсы
Проект использует следующие виртуальные файловые системы:
- `/app` — для приложения.
- `/ezrknn-llm` — для дополнительных библиотек.
## Настройка и использование моделей
### Настройка моделей
Отредактируйте файл моделей как вам необходимо `app/model_configs.py`.