Guys, thanks to ProblemHunt, I've had the chance to meet many of you. You're building amazing products and solving real-world problems.
One of those connections was Ekaterina, a developer from Canada. She previously worked at Microsoft, and now she's focused on building her own startups. She's currently creating LLMKnights — a platform for quickly comparing AI models.
Here's the idea: imagine you're building a service that converts speech to text. How do you figure out which LLM performs best for your use case without becoming too expensive?
Instead of integrating different models one by one, LLMKnights lets you create test cases in just a few minutes, run them across multiple models at once, and compare their quality, speed, and cost. Once you've found the best model, you can fine-tune it by experimenting with different prompts and parameters to find the optimal configuration.
You can also explore tests and reviews shared by other users.
—————————
Ребят, благодаря ProblemHunt мне удалось познакомиться со многими из вас. Вы создаёте классные продукты и решаете насущные проблемы.
Одним из таких знакомств стала Екатерина — разработчик из Канады. Раньше она работала в Microsoft, а сейчас строит собственные стартапы. Сейчас она создаёт LLMKnights — платформу для быстрого сравнения AI-моделей.
Суть: например, вы хотите создать сервис, который переводит голос в текст. Как понять, какая LLM лучше справится с задачей и не окажется слишком дорогой?
Вместо того чтобы подключать разные модели по отдельности, в LLMKnights можно за несколько минут создать тесты, запустить их сразу на нескольких моделях и сравнить качество, скорость и стоимость. После этого можно выбрать лучшую модель и уже подобрать для неё оптимальные промпты и параметры.
Также можно изучить тесты и обзоры, которыми поделились другие пользователи.