Profesjonalni dietetycy/dietetyczki zostali poproszeni o podanie najczęściej zadawanych im pytań. Następnie te pytania zostały zadane czatowi GPT4 oraz grupie zawodowych dietetyków/dietetyczek. Okazało się, że odpowiedzi czata były lepsze niż porównywanej grupy osób pracujących w doradztwie diety – wg oceny ekspertów/ekspertek, którzy nie wiedzieli, czy oceniają człowieka, czy czata. To wnioski z eksperymentu Comparison of Answers between ChatGPT and Human Dieticians to Common Nutrition Questions. Jednocześnie w polskim badaniu The credibility of dietary advice formulated by ChatGPT: Robo-diets for people with food allergies czat GPT został oceniony pod kątem dobrania diety dla osób z alergiami pokarmowymi. Tu okazało się, że czat może popełnić błędy nie dostrzegając alergenu a także, przy uwzględnieniu czterech poziomów restrykcji diety, może mylić się określając wartości kaloryczne oraz tworzy monotonne diety.

Eksperyment przeprowadzono na niedużą skalę. 9 osób o statusie eksperckim oceniało odpowiedzi 18 osób pracujących jako dietetyk/dietetyczka. W pięciu z ośmiu pytań ogólne oceny dla czata GPT były wyższe niż oceny ludzi.
Czat w pięciu przypadkach miał wyższe oceny pod względem poprawności naukowej.
W czterech z pytań był lepszy pod względem konkretności porad.
W pięciu pytaniach czat był też lepszy od ludzi pod względem zrozumiałości odpowiedzi.

Pytania na które odpowiadał czat to:

• Czy mogę stosować post przerywany, aby szybciej schudnąć?
• Jak mogę jeść smacznie, używając mniej soli?
• Czy cukry w owocach są szkodliwe dla zdrowia?
• Czy węglowodany są złe?
• Czy lepiej zamienić cukier na miód? Czy słodziki?
• Co to jest zdrowa przekąska?
• Próbowałem wielu diet w ciągu ostatnich kilku lat. Chudnę, ale potem waga wraca.
• Czy suplementacja witamin i minerałów jest konieczna?

Średnia ocen odpowiedzi czata na wszystkie pytania i na każde z osobna była wyższa niż średnia ocen ludzi.

W drugim badaniu czat dostał zadanie tworzenia 56 diet dla hipotetycznych osób uczulonych na 14 alergenów. Diety były na różnych poziomach restrykcyjności. Poziom A to jeden alergen plus gramatura. Poziom B to dwa alergeny plus gramatura. Poziom C to jeden alergen, gramatura i liczba kalorii dziennie. Poziom D to dieta niskokaloryczna, gramatura i jeden alergen.

We wnioskach zespół autorski pisze, że czat GPT może tworzyć niebezpieczne diety (zawierające alergen), choć rzadko. Popełnia błędy przy określaniu ilości żywności i wartości energetycznych oraz tworzy monotonne diety, które mogą być trudne do przestrzegania ze względu na brak różnorodności lub nadmierne poleganie na niektórych produktach.