Human loop parece ofrecer un playground similar al Playground de GPT-3, pero con algunas características adicionales. Actualmente están trabajando con más usuarios de la industria.
Características
Proporciona un SDK simple para registrar las solicitudes de GPT-3 y la retroalimentación del usuario.
Proporciona retroalimentación sobre las entradas del usuario y descubre problemas que el usuario no está captando.
Los usuarios podrán registrar señales explícitas e implícitas a través del SDK.
Los usuarios podrán realizar pruebas A/B fácilmente en modelos y prompts con el motor de mejora construido para GPT-3.
Los usuarios podrán comparar prompts en diferentes modelos y encontrar el mejor modelo y reducir costos.
Sander Schulhoff
Sander Schulhoff is the Founder of Learn Prompting and an ML Researcher at the University of Maryland. He created the first open-source Prompt Engineering guide, reaching 3M+ people and teaching them to use tools like ChatGPT. Sander also led a team behind Prompt Report, the most comprehensive study of prompting ever done, co-authored with researchers from the University of Maryland, OpenAI, Microsoft, Google, Princeton, Stanford, and other leading institutions. This 76-page survey analyzed 1,500+ academic papers and covered 200+ prompting techniques.