Делегувати тестове. Як кандидати втрачають роботу через ШІ — кейс appflame
Будь-яку статтю можна зберегти в закладки на сайті, щоб прочитати її пізніше.
Режим читання збільшує текст, прибирає все зайве зі сторінки та дає можливість зосередитися на матеріалі. Тут ви можете вимкнути його в будь-який момент.
Спеціалісти з різних сфер тестують сервіси на основі штучного інтелекту, щоб спростити рутинні завдання, покращити результат та заощадити час. Та чи можна віднести до рутинної роботи виконання тестового завдання, коли влаштовуєшся на роботу?
Марія Лісовська, Team Lead Performance Marketing Hily в appflame та кураторка курсу Mobile Apps Marketing, ASO в онлайн-інституті Projector, розповідає про використання ШІ кандидатами для виконання тестового та пояснює, коли це шкодить отриманню оферу.
Половина тестових завдань, які ми отримуємо від кандидатів, — виконані штучним інтелектом. На вакансію перфоманс-маркетолога в appflame таких було п’ять з десяти. Ще три частково зроблені за допомогою ШІ, а одне — виконане ШІ, але перекладене людською мовою та доповнене прикладами кандидата.
Що є в людини й немає в ШІ?
Тестове завдання — традиційний етап у процесі найму в будь-якій сфері. Перформанс-маркетинг — не виняток. Ми не просимо кандидатів написати маркетингову стратегію на п’ять років з практичними порадами й точним прогнозом виторгу.
Наше тестове — це прості завдання з розрахунками та висновками, щоб перевірити досвід та експертизу. Така собі удосконалена капча для перевірки, що кандидат — таки не робот.
Спеціаліст з перформанс-маркетингу постійно оптимізовує рекламні кампанії, щоб збільшити кількість конверсій та підвищити інші показники. Він ухвалює рішення на базі певного поєднання навичок, досвіду та інтуїції. Знає, як відреагують на зміни в рекламному кабінеті алгоритми соцмереж та користувачі. І це береться із розуміння продукту та емоцій споживачів.
Що робить штучний інтелект? Він пропонує рішення на базі загальних знань, мас-маркет досвідів і без жодної інтуїції. Він не заглиблюється в особливість продукту та не може проаналізувати ефективність попередніх рекламних кампаній. І навіть якщо дати йому всі ввідні дані, не факт, що він правильно їх інтерпретує.
Протягом цього року ми шукали людей на три напрями — Snapchat, TikTok, Apple Search Ads. Я адаптовую тестове завдання під кожну нову позицію, враховуючи специфіку роботи та бажаний досвід. Однак побачити кандидата крізь призму тестового завдання стало складніше після медійної кампанії ШІ. Адже майже усі використовують ШІ-інструменти для виконання базових завдань, які мали б перевірити унікальний досвід кандидатів.
Краш-тест ШІ: чи впорається він із тестовим завданням?
Написаний ШІ текст видно відразу, навіть після кількох ітерацій переписування. Не обов’язково використовувати спеціальні інструменти для перевірки, щоб побачити поверхневі відповіді й відсутність людського досвіду.
Іноді кандидати навіть не редагують текст вручну, щоб прибрати визначення базових термінів, які так любить додавати ШІ: «Якщо ви не знали, то дізнаєтесь що CPI (cost per install) — це…».
Проте найскладніше штучному інтелекту даються математичні розрахунки, з яких потрібно зробити висновок.
У відповідь на таке завдання ШІ дає текстові полотна без суті та розв’язання. Перевіримо на прикладі тестового, яке отримують наші кандидати:
Задача. «Ви закуповуєте трафік на такі країни: US, UK, MX. Нижче наведені ваші результати за тиждень за заданими ГЕО. Опишіть логіку оптимізації по локаціях для досягнення максимального прибутку в майбутньому, додайте розрахунки. Яких даних не вистачає для висновків?».
Просимо ШІ розв’язати задачу. Отримуємо такий текст:
Логіка розрахунків правильна, але інтерпретація, висновки, логіка розвитку кампаній не збігається з умовою задачі. Також абсолютно відсутні приклади власних думок, виходячи з досвіду. Тут багато теорії з абревіатурами, яку не пишуть спеціалісти, виконуючи тестові завдання самостійно. Додаємо трохи магії ШІ з іншого боку, і перевірка на Авадакедавру:
Логіка правильної відповіді звучатиме так: «Потрібно розвивати кампанію країни з найбільшим ROI в цьому випадку. Також звертати увагу на обсяг отриманого прибутку в інших країнах. Це можливо, є більш важливим в задачі з точки зору росту обсягів, витрат і прибутків. Кампанія в країні з найбільшим прибутком (у нашому випадку це US) може мати більшу перспективу масштабування, ніж UK».
Таку відповідь може сформулювати лише людина, що має особисту думку, стратегічне мислення та досвід, на який слід спиратися.
Залежно від того, що і як пише кандидат у тестовому завданні, роботодавець може зрозуміти, чи сформоване в кандидата мислення:
- як працювати так, щоб досягти цілей з масштабування рекламних кампаній;
- як збільшувати бюджет для того, щоб була стабільна ефективність;
- як правильно планувати бюджет, щоб зважувати певний час негативну ефективність, а потім отримувати набагато кращий результат.
Тестове завдання містить питання, на які можна відповісти логічно й практично. Частина питань є відкритими, і фактично це має бути особиста думка кандидата. Вона не може бути правильною чи помилковою. Якщо людина опанувала рекламні інструменти, то вона на власному досвіді пояснює, що та як може спрацювати.
Штучний інтелект не вміє думати логічно. Він дає шаблонну й узагальнену відповідь, тому годі очікувати від нього глибокої аналітики та власних думок.
Замість післямови
ШІ — зовсім неідеальний напарник, адже йому не вистачає практичних знань та цінностей. Делегуйте йому не стратегічні, а рутинні задачі. Попросіть структурувати ваші думки в тестовому завданні. Він зможе відредагувати вашу відповідь на питання у тестовому завданні, зробити її більш прозорою та чіткою, чи просто виправити помилки.
Також можна залучати ШІ, щоб швидко дізнатися додаткові факти. Якщо потрібно отримати дані про цільову аудиторію з декількох досліджень, попросіть його це зробити й дати коротку вижимку. Або ж нехай знайде детальну інформацію про певний продукт і пояснить простими словами його особливості.
Хай штучний інтелект буде агрегатором відкритої інформації, щоб ви швидше й краще впоралися із тестовим завданням.
Адже повністю довірити йому свою кар’єру — це ризик втратити шанс на отримання бажаного оферу.