
MedOS combina óculos inteligentes, cobots e IA. Fonte: Universidade de Stanford
Os desenvolvedores estão encontrando maneiras de combinar inteligência synthetic, realidade aumentada e digital e robótica para aplicações úteis. O Stanford-Princeton IA A equipe Coscientist lançou hoje o MedOS, que afirma ser “o primeiro IA–XR-sistema cobot projetado para auxiliar ativamente os médicos em ambientes clínicos reais.”
Mais de 60% dos médicos nos EUA relataram sintomas de esgotamento, de acordo com estudos recentes. Os pesquisadores de Stanford e Princeton disseram que projetado MedOS para aliviar o esgotamento, não substituindo médicos, mas reduzindo a sobrecarga cognitiva, detectando erros e ampliando a precisão por meio de automação inteligente e assistência robótica.
“O objetivo não é substituir os médicos. É ampliar a sua inteligência, ampliar as suas capacidades e reduzir os riscos representados pela fadiga, descuido ou complexidade”, afirmou o Dr. projeto e professor associado da Universidade de Stanford. “MedOS não é apenas um assistente. É o início de uma nova period de IA como um verdadeiro parceiro clínico.”
MedOS incorpora ciclo de suggestions
“A medicina separa historicamente o raciocínio clínico abstrato da intervenção física, disseram os pesquisadores em um artigo.“Nós superamos essa divisão com o MedOS, um modelo mundial incorporado de uso geral. Imitando a cognição humana através de uma arquitetura de sistema duplo, o MedOS demonstra um raciocínio superior em benchmarks biomédicos e executa de forma autônoma pesquisas clínicas complexas.”
MedOS combina óculos inteligentes, braços robóticos e multiagente IA para formar um copiloto em tempo actual para médicos e enfermeiras, disse o Stanford-Princeton IA Equipe Cocientista. Sua missão é reduzir erros médicos, acelerar a precisão cuidadoe apoiar médicos sobrecarregados.
Os cientistas aproveitaram anos de experiência com LabOS para unir o diagnóstico digital à ação física no MedOS. Eles disseram o sistema pode perceber o mundo em 3D; raciocinar através de cenários médicos; e atuar em coordenação com médicos, enfermeiros e equipes assistenciais.
MedOS também introduz um “modelo mundial para a medicina” que incorpora percepção, intervenção e simulação em um ciclo de suggestions contínuo. Usando óculos inteligentes e braços robóticos, ele pode compreender cenas complexas, planejar procedimentos e executá-los em estreita colaboração com os médicos.
“A camada de dados nos permite construir o modelo mundial com inteligência espacial para permitir que a robótica trabalhe com os humanos hoje, em vez de esperar por robôs totalmente humanóides”, disse o Dr. O Relatório do Robô. “Existem muito poucos robôs em hospitais além do da Vinci (da Intuitive Surgical). Queremos trazer robôs para cada parte da medicina.”
A plataforma foi testada em simulações cirúrgicas, fluxos de trabalho hospitalares e diagnósticos de precisão ao vivo. Os pesquisadores disseram que ele se mostrou promissor em tarefas como assistência laparoscópica, mapeamento anatômico e planejamento de tratamento.

Visão geral esquemática da arquitetura MedOS conectando o mundo digital e o mundo físico. (Clique aqui para ampliar.) Crédito: Mengdi Wang, Le Cong, et al.
Stanford-Princeton IA Equipe Coscientist constrói sistema modular
Os pesquisadores disseram que projetaram o MedOS para ser modular e adaptável a ambientes clínicos e especialidades. Em cirúrgico simulações, demonstrou a capacidade de interpretar vídeo em tempo actual de óculos inteligentes, identificar estruturas anatômicas e auxiliar no alinhamento de ferramentas robóticas.
A equipe desenvolveu seu próprio sistema tátil sensores trabalhar com braços robóticos com força e potência limitadasdisse Cong. Ele funciona com óculos e câmeras inteligentes disponíveis no mercado para coletar dados de treinamento, o que complementa bancos de dados acessíveis ao público.
MedOS integra percepção, planejamento e ação, funcionando como copiloto clínico e colaborador ativo em procedimentos de alto risco, disse o Stanford-Princeton IA Equipe Cocientista. Suas capacidades incluem:
- Um multiagente IA arquitetura que espelha a lógica do raciocínio clínico, sintetiza evidências e gerencia procedimentos em tempo actual
- MedSuperVision, um conjunto de dados de vídeos médicos de código aberto com mais de 85.000 horas de imagens cirúrgicas de procedimentos
- Sucesso comprovado em ajudar enfermeiros e estudantes de medicina a alcançar desempenho de nível médico e reduzir erros humanos em ambientes propensos à fadiga
- Estudos de caso, incluindo a descoberta de novos caminhos de resistência à imunoterapia através da integração de dados de grandes coortes
“Precisamos primeiro gerar o modelo mundial”, disse Cong. “Ao fornecer informações de médicos, clínicos e enfermeiras, nosso cérebro de IA poderá ser a base para a implantação de humanóides totalmente autônomos algum dia.”
Enquanto isso, está trabalhando em implantações iniciais em logística hospitalar e laboratórios. Para logística, o MedOS pode ajudar a implantar rapidamente robôs para transportar amostras e suprimentos de sangue.
Os laboratórios são um bom lugar para começar porque não são voltados para o paciente e, portanto, são mais simples para garantir que os testes e o diagnóstico sejam mais rápidos e livres de erros, explicou Cong.
Os primeiros pilotos levam à revelação do GTC
MedOS está sendo lançado com o apoio de NVIDIAAI4Science, Nebius e VITURE. Ele foi implantado nos primeiros pilotos em Stanford, Princeton e na Universidade de Washington. Os colaboradores clínicos agora podem solicitar acesso antecipado.
“Estamos apenas começando a trabalhar com os médicos para testar procedimentos cirúrgicos em um corpo simulado”, disse Cong. “Queremos ter certeza de que, para aplicações voltadas para o paciente, já testamos com diferentes níveis de médicos e simulações antes de passarmos para ambientes clínicos reais. O MedOS já provou ser robusto e melhor que o Gemini para testes espaciais. Ele poderia ser muito flexível para automação cirúrgica.”
MedOS será apresentado em um evento organizado em Stanford no início de março, seguido por uma apresentação pública na GPU Expertise Convention da NVIDIA (TCG). A mídia, os médicos e as instituições de pesquisa interessadas em demonstrações ou entrevistas iniciais podem entrar em contato com a equipe MedOS para coordenação.
O Stanford-Princeton IA A equipe Coscientist se dedica em conjunto à construção em tempo actual IA sistemas projetados para trabalhar junto com cientistas humanos e médicos. Ele disse que LabOS e MedOS são implantados nas principais universidades e hospitais para acelerar a descoberta, reduzir o erro humano e melhorar os resultados científicos e clínicos.
“Estamos em contato com sistemas hospitalares no Noroeste e em breve na Costa Leste”, disse Cong. “Estamos enviando ferramentas de coleta de dados para outras instituições parceiras e para a próxima versão, que utilizará enormes quantidades de dados de referência. É um progresso contínuo e diversas instituições estão interessadas no MedOS.”
