Thread de meng shao (@shao__meng)

[Recomendação de código aberto] 🌍 Modelos de mundo incríveis Esta é uma coleção selecionada de recursos sobre modelos mundiais, organizando sistematicamente as informações sobre eles. Jornais Clássicos e Recentes • Implementação de código aberto (Código) • Pesquisas e tutoriais • Conjuntos de dados e benchmarks O que é um "modelo mundial"? Para dar à IA um "simulador no cérebro", tal como os humanos têm. • Imaginação e dedução: Assim como quando você está dirigindo, não é preciso realmente bater para saber: "Se eu não frear, vou bater na traseira de alguém." Os modelos do mundo permitem que a IA deduza mentalmente: "Se eu realizar a ação A, o mundo se tornará o estado B." • Essência: É uma abstração e modelagem das leis que regem o mundo físico. O ganhador do Prêmio Turing, Yann LeCun, enfatizou repetidamente que os modelos do mundo são essenciais para que a IA adquira senso comum, raciocínio e capacidades de planejamento. Isso envolve múltiplos campos, como visão computacional, aprendizado por reforço e IA generativa. O que está incluído no projeto? O projeto categoriza seus vastos recursos, abrangendo principalmente as seguintes áreas centrais, refletindo as tendências tecnológicas atuais em IA: Inteligência Incorporada e Robótica: Como os robôs podem aprender a andar e pegar objetos sem destruir a casa? Esta coleção reúne recursos sobre como os robôs podem aprender a tomar decisões por meio de ambientes simulados. • Condução autônoma: como o FSD da Tesla ou o modelo GAIA-1 da Wayve. A condução autônoma não só precisa "enxergar" a estrada, mas também prever as ações dos veículos e pedestres ao redor nos próximos segundos, e essa é justamente a força dos modelos mundiais. • Geração de vídeo e simulação física: Semelhante ao OpenAI Sora ou ao Google Genie. Esses modelos conseguem gerar vídeos realistas porque aprendem implicitamente as leis físicas de "como os objetos se movem" e "como a luz e a sombra mudam". • Fundamentos teóricos: Inclui arquiteturas de algoritmos fundamentais, como a série Dreamer e o JEPA. Endereço do projeto