По мнению автора статьи, PostgreSQL — единственная база данных, которая вам нужна. MongoDB и DynamoDB существуют только потому, что у Postgres есть проблема с масштабированием. Если бы он мог работать с таблицами на 100+ ТБ и выдавать миллион запросов в секунду, никто бы не стал использовать что-то другое.
Чтобы это исправить, команда строит PgDog. Это прокси перед Postgres, который делает базу горизонтально масштабируемой. Разворачивать можно где угодно: on-prem, в своём облаке, на ноутбуке. Просто pull Docker-образ, поменяйте DATABASE_URL, и прокси сделает всю работу.
PgDog уже в продакшне. Он обрабатывает больше 2 миллионов запросов в секунду в десятках инсталляций. Команде известно о более чем 20 ТБ шардированных данных. Проект открытый, на GitHub его Docker-образ pull’нули более 1.4 миллиона раз. Новые версии выходят каждый четверг, сообщество в Discord растёт, авторы отвечают на вопросы и помогают ежедневно.
Сама компания — маленький стартап из трёх человек. Автор текста (Лев) сам был инженером в Instacart, где масштабировал Postgres и увеличил нагрузку на компанию в 5 раз за апрель 2020 года. Основной проблемой тогда было обслуживать сотни тысяч заказов продуктов в минуту. Они шардировали Postgres на RDS, Aurora и EC2. Ту же технологию теперь выпускают как open source продукт.
Стартап поднял $5.5 млн от Basis Set, Y Combinator, Pioneer Fund и других. Говорят, что денег хватит на годы работы. Главная цель — сделать Postgres рабочим для всех и при любых нагрузках. Сейчас команда также строит Enterprise-редакцию PgDog для AWS — с поддержкой по SLA.