Sekilas tentang LMSYS Chatbot Arena dan permasalahan seputar platform benchmarking LLM crowdsourcing, termasuk bias, kurangnya transparansi, dan ikatan komersial (Kyle Wiggers/TechCrunch)


Kyle Wiggers / TechCrunch.dll:

Sekilas tentang LMSYS Chatbot Arena dan permasalahan seputar platform benchmarking LLM crowdsourced, termasuk bias, kurangnya transparansi, dan ikatan komersial– Penilai manusia membawa bias mereka sendiri – Dalam beberapa bulan terakhir, eksekutif teknologi seperti Elon Musk memuji kinerja…