В марте 2023 года компания Databricks представила мощную открытую модель искусственного интеллекта DBRX, которая может превзойти аналоги с открытым исходным кодом. Ее уже сравнивают с чат-ботом ChatGPT от OpenAI. «РБК Тренды» рассказывают, как компания пришла к успеху.
Databricks: что за компания
Databricks — это компания по обработке данных, аналитике и искусственному интеллекту. Она предоставляет организациям облачную платформу, которая помогает им создавать, масштабировать и управлять данными и ИИ, включая модели генеративного искусственного интеллекта. Это позволяет компаниям готовить данные для аналитики, расширять возможности принятия решений на основе данных и внедрять машинное обучение. Сама Databricks называет своей главной целью демократизацию науки о данных и искусственного интеллекта.
Основные факты:
- штаб-квартира расположена в Сан-Франциско, но есть также представительства в Канаде, Великобритании, Нидерландах, Сингапуре, Австралии, Германии, Франции, Японии, Китае, Южной Корее, Индии, Бразилии, Швейцарии, Коста-Рике и Сербии;
- обслуживает 9 тыс. организаций по всему миру, в том числе ABN AMRO, Condé Nast, USPS и Shell, сотрудничает с Microsoft, Amazon и другими;
- число сотрудников — 6 тыс. человек;
- стоимость — $43 млрд;
- доход — $1,6 млрд;
- занимает второе место в топ-100 облачных компаний по версии Forbes;
- трижды становилась лидером рейтинга Gartner Magic Quadrant для систем управления облачными базами данных;
- вошла в топ-10 самых инновационных компаний в области науки о данных за 2022 год по версии Fast Company;
- входит в рейтинг 50 новаторов в области искусственного интеллекта Fortune;
- вошла в рейтинг AI 50 Forbes в 2023 году;
- стала одним из лучших воркспейсов в сфере технологий по версии Fortune;
- выступает соорганизатором конференции для сообщества разработчиков Data + AI Summit.
Чем занимается Databricks
Компания стала пионером в создании data lakes, или «озера данных», — платформы, которая позволяет организациям управлять и использовать как структурированные, так и неструктурированные данные для бизнес-аналитики и задач искусственного интеллекта. Она предлагает механизм анализа, который распознает специфические данные компании и позволяет ей внедрять собственные методы для управления ими. Платформа позволяет разрабатывать разнообразные модели машинного обучения, а также развивать инициативы в области ИИ. «Озеро данных» работает на базе платформы для распределенной разработки Apache Spark с открытым исходным кодом. В октябре 2022 года его одобрили для использования федеральным правительством США и его подрядчиками.
Databricks в рамках своей платформы предлагает:
- опцию Delta Sharing с открытым исходным кодом для обмена данных в сфере аналитики и ИИ. Клиенты могут обмениваться данными в реальном времени между разными платформами, облаками и регионами;
- каталог Unity для управления данными и искусственным интеллектом с соблюдением требований безопасности. Он позволяет управлять структурированными и неструктурированными данными, моделями машинного обучения, блокнотами, дашбордами и файлами в любом облаке или на платформе;
- Mosaic AI — унифицированные инструменты для создания, развертывания и мониторинга решений искусственного интеллекта и машинного обучения. Они позволяют в том числе создавать новейшие модели генеративного ИИ и большие языковые модели;
- DBRX — открытую большую языковую модель общего назначения, которую могут использовать сообщества и предприятия, создающие свои собственные модели. По оценкам Databricks, она превосходит GPT-3.5 и конкурирует с Gemini 1.0 Pro, а также со специализированным ИИ для программирования, таким как CodeLLaMA-70B (принадлежит Meta, которая признана экстремистской и запрещена в России).
