Khảo sát: Nghiên cứu nội bộ tại các phòng thí nghiệm AI tiên tiến đi trước học viện trong "AI truyền thống" (mở rộng LLM bình thường, transformers + các lĩnh vực liên quan như SSMs, RL, v.v.) bao xa? Bỏ qua hoàn toàn các phương pháp mới hoàn toàn được lấy cảm hứng từ sinh học hoặc điều gì đó, nghiên cứu của các phòng thí nghiệm AI tiên tiến so với học viện: