Open-Interface: controlar o computador com LLMs

• É possível controlar o computador usando uma chave de API da OpenAI.
  • Se quiser, também é possível usar outro LLM. Você também pode contar com a ajuda do LiteLLM.
• É possível se comunicar com o LLM e fazer com que ele imite suas instruções (entrada de mouse/teclado).
• Exemplos:
  • "Resolva o quebra-cabeça de palavras de hoje."
  • "Abra o Google Docs e monte um cardápio de almoço para mim."
  • "Codifique uma aplicação web para mim."
• Instruções que podem causar mau funcionamento:
  • Raciocínio espacial
    • Manipulação de planilhas
  • Aplicações GUI complexas em que o cursor do mouse é essencial
• Em breve:
  • "Crie alguns samples de baixo no Garage Band para mim."
  • "Descubra o gosto musical dos meus amigos no Sportify e crie uma playlist para a festa de hoje à noite."
• Dependendo do LLM, o custo estimado deve ficar em cerca de $0.0005 - $0.002.
• É possível interromper pressionando o botão 'Stop' ou movendo o cursor para o canto da tela.
• Se houver vários monitores, ele só poderá atuar dentro da tela principal.