Тестування платформ для створення AI-агентів: ChatGPT, Claude, Gemini та їх можливості в фінансовому плануванні

Яка платформа створює найкращих AI-агентів? Ми тестуємо ChatGPT, Claude, Gemini та інших

З AI-агентами можна робити багато речей: шукати інформацію в бібліотеці документів, створювати код, здійснювати веб-скрейпінг, отримувати глибокий аналіз складних даних і багато іншого. Можна навіть створити віртуальний офіс з групою агентів, спеціалізованих на різних завданнях, і організувати їх роботу, як у вашому власному персоналі цифрових працівників.

Отже, наскільки складно це зробити? Якщо звичайна людина захотіла б створити свого власного AI-фінансового радника, яка платформа їй підійде найкраще? Без API, без дивних кодувань, без Github — ми просто хотіли дізнатися, наскільки добре компанії, що займаються AI, створюють агентів без наявності в користувача високих технічних навичок.

Звичайно, ви отримуєте те, за що платите. У нашому випадку ми також хотіли дізнатися, чи є кореляція між тим, наскільки легко простій людині налаштувати агента, та якістю результатів, які вони отримують.

Наш експеримент порівняв п`ять потужних платформ: ChatGPT, Claude, Huggingface, Mistral AI та Gemini. Кожна платформа отримала однакові базові інструкції для створення фінансового радника.

Тест зосереджувався виключно на готових можливостях. Чи здатні агенти впоратися з типовим сценарієм — у цьому випадку допомогти комусь збалансувати $25,000 інвестицій проти $30,000 боргів. Ми також хотіли перевірити, наскільки добре вони можуть аналізувати торгову графіку. Ми уникали використання додаткових інструментів, які б підвищили продуктивність агентів, і натомість намагалися підійти максимально просто.

Ось що ми дізналися і як ми оцінили моделі:

1. OpenAI`s GPT (8.5/10) Легкість налаштування: 4/5 Якість результатів: 4.5/5
2. Google Gemini (7/10) Легкість налаштування: 4/5 Якість результатів: 3/5
3. HuggingChat (6.5/10) Легкість налаштування: 2/5 Якість результатів: 4.5/5
4. Claude (5.5/10) Легкість налаштування: 2.5/5 Якість результатів: 3/5
5. Mistral AI (5/10) Легкість налаштування: 2.5/5 Якість результатів: 2.5/5

З огляду на попередній рейтинг, немає універсального рішення, і всі платформи мають свої переваги та недоліки. З деякою відданістю та уважним налаштуванням запитів результати однієї платформи можуть змінюватися і перевершувати інші. Врешті-решт, всі LLM мають свої відповідні стилі запитів.

Якщо ви хочете дізнатися більше про rationale, що лежить в основі нашого рейтингу, ось більш детальний огляд нашого досвіду та результатів, які ми отримали з нашими агентами. Ми налаштували всіх агентів за однією і тією ж системною підказкою, без додаткових параметрів і функціональностей, і задали їм одне й те саме базове питання: `У мене є $25 тисяч для інвестицій і $30 тисяч боргу. Побудуйте мені фінансовий план.`