Простейшее хранилище данных

user cee4d3b9fb SVI Доработка тестов; 81.2% 2 лет назад
cmd fe93cf77b7 SVI Исправления, тесты; 76.2% 2 лет назад
doc fe93cf77b7 SVI Исправления, тесты; 76.2% 2 лет назад
internal cee4d3b9fb SVI Доработка тестов; 81.2% 2 лет назад
pkg cee4d3b9fb SVI Доработка тестов; 81.2% 2 лет назад
vendor 361803397e SVI Обновление вендоринга 2 лет назад
web 87c4122edb SVI Переделки под единообразную структуру; 76.2; 2 лет назад
.env 06d969a08a SVI Исправления,тесты, документация;85.0% 2 лет назад
.gitignore 658044dedd SVI Игнор служебных файлов 2 лет назад
LICENSE c7b7a4db5b Initial commit 2 лет назад
Makefile 361803397e SVI Обновление вендоринга 2 лет назад
README.md 87c4122edb SVI Переделки под единообразную структуру; 76.2; 2 лет назад
dev.sh fe93cf77b7 SVI Исправления, тесты; 76.2% 2 лет назад
go.mod 361803397e SVI Обновление вендоринга 2 лет назад
go.sum 361803397e SVI Обновление вендоринга 2 лет назад
make.py 87c4122edb SVI Переделки под единообразную структуру; 76.2; 2 лет назад

README.md

gostore

Cетевое хранилище на golang.

Описание

Хранилище ключ-значение работает поверх HTTP1.1/ip4.

Хранилище включает несколько возможностей, разбитых по группам.

Структура хранилища

flowchart TD
  IService
  IStore
  IServHttp

  IServHttp --> IService
  IStore --> IService

Работа через прокси

Запросы сделанными классическими специально, чтобы гарантировать правильную работу через прокси.

Особенности работы

Поддерживается KeepAlive с ожиданием следующего запроса 10 сек. Клиент должен присылать запросы не реже, чтобы поддерживать открытым соединение.

Если необходима работа через внешние сети, то следует использовать nginx proxy manager со включенными сертификатами LetsEncript перед сервисом gostore.

Максимальный размер значения ключа не может быть более 10 МБ (но можно настроить в коде).

Пределы использования

Примерные лимиты эффективности хранилища находится в следующих пределах

  • эффективный размер 20 ТБ (допустимо до 60 ТБ);
  • эффективное количество ключей 10Г (допустимо 20ТБ).

Необходимо помнить, что в любом случае физические параметры оперативной памяти и дисковой подсистемы сильно ограничены.

Планируется проектирование хранилища для работы в составе нескольких репликаций и множественное шардирование.

Команды сборки

make         # Сборка сервиса для прода
make build   # -//-
make dev.run # Сборка с и запуск  детектором гонок для отладки
make mod     # Обновление зависимостей