Пост обсуждает личный побочный проект, сосредоточенный на воспроизведении исследований механистической интерпретируемости на проприетарных больших языковых моделях (LLM), вдохновленный недавними работами таких компаний, как Anthropic, OpenAI и DeepMind.
Автор ищет отзывы и взаимодействие от сообщества HackerNews, что указывает на их совместный и открытый подход к исследованию.
Проект связан с недавними академическими публикациями, что предполагает его основанность на текущем научном дискурсе и достижениях в области интерпретируемости ИИ.
Проект Llama 3.2 Interpretability with Sparse Autoencoders, созданный PaulPauls, направлен на воспроизведение исследований механистической интерпретируемости на проприетарных больших языковых моделях (LLM). Проект использует разреженные автоэнкодеры (SAE) для изучения причинной последовательности «мыслей» в моделях, проводя параллели с человеческим мышлением. Это открытое исследование, доступное на GitHub, инициировало обсуждения по интерпретируемости, человеческому мышлению и вызовам, связанным с оценкой SAE, при этом PaulPauls приветствует отзывы от сообщества.
Креативная студия разработала интерактивную игру для Netlify в честь достижения 5 миллионов разработчиков, вдохновленную классической игрой Marble Madness. Игра использует Three.js для 3D-графики и Rapier для физики, интегрируя 2D-контент с 3D-трансформациями CSS для создания бесшовного опыта. Студия приглашает пользователей попробовать игру и оставить отзывы, подчеркивая сочетание маркетингового контента с игровым опытом.
В честь достижения отметки в 5 миллионов разработчиков для Netlify была разработана игра на WebGL, вдохновленная Marble Madness, которая сочетает игровой процесс с маркетинговым контентом. Игра использует Three.js для 3D-графики и Rapier для физики, интегрируя 2D-контент через 3D-преобразования CSS. Поощряется обратная связь для улучшения пользовательского опыта.