Tôi đã không đăng bài về Model Spec trong một thời gian, nhưng Dean đã nhắc đến tôi trong bài viết trước đây của tôi về chúng, vì vậy đã đến lúc nói một cách chắc chắn rằng mỗi phòng thí nghiệm biên giới nên có một model spec. Điều này xây dựng lòng tin lâu dài với người dùng, nhà phát triển và các cơ quan quản lý. Model spec đặt ra ý định về cách mà mô hình nên hoạt động, bất kể nó có thành công hay không. Một lần nữa, tôi rất vui được thảo luận điều này với các phòng thí nghiệm như một buổi tư vấn miễn phí vì tôi nghĩ điều này rất tốt cho thế giới. Phần lớn, những điều này dường như bị chặn lại bởi chính trị - cả bên trong, nơi các nhóm thực sự không thể đồng ý về những gì mô hình nên làm - và bên ngoài, nơi các phòng thí nghiệm lo sợ phản ứng ngược. Hành vi của những mô hình này thực sự có thể điều chỉnh một cách đáng kể (sẽ chia sẻ thêm nghiên cứu mà tôi tham gia vào điều này sớm!) và việc thiếu model specs là điều khá tồi tệ như một tiêu chuẩn cộng đồng. Liên kết đến bài viết của Dean, và các bài viết cũ của tôi về model specs đều ở dưới đây. Khi Olmo ngày càng tốt hơn, điều này đã nằm trong danh sách của tôi để tạo ra một cái và chia sẻ quy trình, những khó khăn khi theo dõi nó, và những điều tương tự. Tôi hoan nghênh áp lực về việc cần phải thực hiện điều này để thiết lập một ví dụ tốt hơn.

OpenAI xứng đáng nhận được RẤT NHIỀU tín dụng cho điều này, một lần nữa cảm ơn @joannejang + @johnschulman2