HN aberto: experiência imersiva de Gaussian Splat da Sutro Tower em São Francisco

• Introdução

  • Trata-se de uma explicação sobre o modelo 3D da Sutro Tower, em San Francisco.
  • Em dispositivos móveis, é possível explorar a cena por meio do modo AR.
  • A Sutro Tower é uma excelente obra arquitetônica, e, para mais informações, é possível consultar o tour digital oficial.

• Contexto técnico

  • Este escaneamento foi possível graças aos avanços recentes em Gaussian Splatting.
  • Foi capturado com drone e alinhado com RealityCapture, depois treinado com gsplat, comprimido com SOGS e renderizado com PlayCanvas.

• Agradecimentos

  • Agradecimento a Wieland Morgenstern pela ajuda no desenvolvimento e na compreensão da compressão Self Organizing Gaussian.
  • Agradecimento a Donovan Hutchence pela ajuda na implementação da decodificação do novo formato de compressão.
  • Agradecimento a Daylen Yang por pilotar o segundo drone.

• Como usar

  • Anotações, música, controle de órbita: botão esquerdo do mouse, toque + arrastar
  • Pan: botão do meio do mouse, deslizar
  • Visualização: botão direito do mouse
  • Zoom: roda do mouse, pinça
  • Voo: WASD, teclas de seta
  • Ajuste da velocidade de voo: Shift (rápido), Ctrl (lento)
  • Redefinir câmera: R

[GN⁺]

Comentários do Hacker News

• Obrigado por compartilhar este projeto. É realmente muito incrível
• Passei cerca de 30 minutos no nível 6 em maio de 2023, e foi tão incrível quanto se pode imaginar
  • Se você tiver qualquer traço de medo de altura, esta experiência será um pesadelo
• Totalmente sem relação, mas as fotos aéreas de São Francisco mostram de forma surpreendente o quão baixa densidade a cidade tem
  • Um dos lugares mais agradáveis do mundo para se viver está localizado em uma pequena península
  • Ainda assim, até onde a vista alcança, é um mar de casas unifamiliares
  • A distância entre a Sutro Tower e o "centro" de São Francisco é menor do que a distância entre a Brooklyn Bridge e o Central Park
  • Dá para imaginar se esse espaço fosse preenchido com sobrados de 2 a 3 andares
• Minha esposa me deu de presente uma camiseta da Sutro Tower no Natal
  • Foi quando a TV digital OTA foi lançada
  • Enquanto outras pessoas em San Jose removiam ou abandonavam suas antenas de TV, comprei uma nova antena e seções de mastro na Rat Shack e instalei em casa
  • Escaneei o espectro para receber a KQED e outras emissoras
  • Austin City Limits em HD, visto pela primeira vez, foi realmente impressionante
  • As emissoras de TV que chegavam a South Bay via Sutro eram todas, exceto uma
• A antena da Sutro Tower é usada para transmitir sinais por toda a Bay Area para 10 emissoras de TV, 3 emissoras de rádio FM e 20 usuários de comunicação sem fio e móvel, como forças de segurança, táxis, ônibus escolares e internet sem fio
• Excelente trabalho. Foi um dos melhores Gaussian Splats que já experimentei
  • Isso foi ainda mais evidente especialmente em objetos distantes e no céu
  • No modo VR, consegui perceber mais detalhes
  • Não consegui encontrar o "easter egg" e só o vi depois de alternar
• Uau! Eu adoraria ler um post de blog mais aprofundado explicando como fazer algo assim por conta própria
  • Talvez eu até pudesse contribuir com meus próprios splats para uma biblioteca colaborativa de marcos icônicos
  • Consigo imaginar splats interativos de lugares populares sendo adicionados à Wikipedia
• Como alguém que cresceu nos anos 90, isso parece um dos raros exemplos genuínos de um "museu no ciberespaço" que os futuristas da época imaginavam
  • Obrigado por manter esse sonho vivo
• Incrível! Por volta de 2009, tirei dezenas de fotos em alta resolução com uma câmera digital do ponto de observação da Sutro Tower em direção à cidade e usei o Microsoft Photosynth para criar uma impressionante nuvem de pontos em alta resolução da cidade
  • Comecei com várias fotos bem abertas e depois tirei fotos em uma grade sobreposta em diferentes níveis de zoom
  • Se o Photosynth ainda existisse, eu gostaria de rever o resultado