Neurociência
Pesquisa em neurociência, avaliada por neurocientistas
Como o julgamento neurocientífico aparece fora de um departamento, e o padrão a que a coorte fundadora vai submetê-lo. Tudo abaixo é um rascunho em público, de propósito.
O que conta como evidência de competência em pesquisa em neurociência
A neurociência abrange escalas que vão de registros de canal único a imageamento de cérebro inteiro, e seu registro público cresceu à altura: preprints no bioRxiv, conjuntos de dados depositados no OpenNeuro e repositórios similares, e pipelines de análise compartilhados junto com o artigo. Um pipeline de pré-processamento com critérios honestos de rejeição de artefatos, ou um estudo de imageamento cujos limiares estatísticos são declarados antes do resultado, é evidência direta de competência.
Fora das universidades, o trabalho de neurociência conduz empresas de neurotecnologia, equipes de validação de alvos na indústria farmacêutica e práticas de neurofisiologia clínica. O cientista que validou um pipeline de decodificação de BCI, ou que documentou por que um biomarcador candidato não replicou, está fazendo pesquisa em neurociência, apareça ou não isso no título do crachá.
O modo de falha crônico do campo é amostras pequenas perseguindo alegações grandes — estudos de imageamento subdimensionados e achados de circuito que não sobrevivem a uma correção mais rigorosa. Ler atrás dessa distância entre alegação e poder estatístico é uma competência aprendível e pontuável, e é uma que esta comunidade precisa dos seus neurocientistas.
Resultados negativos e nulos carregam peso real aqui: um estudo bem-poderado que não encontrou um efeito alegado, uma tentativa de replicação de um achado de circuito amplamente citado, uma reanálise pública com uma correção de comparações múltiplas mais rigorosa. Produzi-los é uma das evidências mais fortes de julgamento que o campo oferece.
A rubrica de avaliação de neurociência, primeiro rascunho
Esta rubrica se apoia fortemente na distância entre sinal e alegação, porque a combinação de amostras pequenas e dados de alta dimensão da neurociência torna essa distância o principal problema de avaliação do campo.
- Poder estatístico e correção
- O tamanho da amostra é justificado antes do estudo, e a correção de comparações múltiplas corresponde ao número de testes de fato realizados — não a um subconjunto escolhido depois de ver os dados.
- Transparência de método
- Parâmetros de aquisição, pipeline de pré-processamento e critérios de exclusão estão documentados o suficiente para reexecução, e o código de análise é inspecionável.
- Disciplina de alegação
- As conclusões permanecem dentro do que os dados sustentam; linguagem funcional ou causal é conquistada por perturbação ou intervenção, não emprestada de correlação ou coativação.
- Coerência entre escalas
- Alegações feitas num nível de descrição — molecular, de circuito, sistêmico, comportamental — são checadas contra o que se sabe em níveis adjacentes, e as inconsistências são endereçadas, não ignoradas.
Avaliadores fundadores de neurociência vão revisar este rascunho contra preprints e conjuntos de dados reais antes que ele seja usado para pontuar alguém.
O que os avaliadores fundadores de neurociência vão fazer
Começar testando a rubrica sob pressão contra os artefatos que neurocientistas de fato produzem — um estudo de imageamento se lê de forma diferente de um artigo de eletrofisiologia de unidade única, e o padrão precisa sobreviver a ambos.
Rodar rounds de calibração em trabalho público: pontuação independente dos mesmos preprints e conjuntos de dados, seguida de comparação estruturada de onde leitores treinados discordam e por quê.
Levar um registro de calibração por disciplina para a comunidade aberta, alimentando o sistema de pesos com neurocientistas cujo julgamento tem um histórico medido.
Para quem é isto
A coorte precisa de neurocientistas que já leem o trabalho alheio da forma difícil, através de escalas e métodos:
- Neurocientistas de sistemas e cognitivos que leem o pipeline de pré-processamento antes da seção de discussão.
- Neurocientistas computacionais cujos modelos e código são seu verdadeiro registro de publicação.
- Cientistas de neurotecnologia e indústria farmacêutica cujo melhor trabalho vive em relatórios de validação que nenhum periódico jamais verá.
- Neurofisiologistas clínicos e pesquisadores em início de carreira que aprenderam desenho rigoroso à sombra do problema de poder estatístico do campo.
Para quem não é isto
Tão real quanto o resto, e vale a pena ler antes de se candidatar:
- Quem espera credenciar o próprio programa de pesquisa — avaliadores vão pontuar artefatos de outras pessoas aqui.
- Pesquisadores que querem uma credencial mais rápido do que um padrão pode ser construído honestamente.
- Quem não está disposto a ter a própria acurácia de pontuação medida e visível; a calibração é a âncora da comunidade.
- Quem precisa que a plataforma esteja em funcionamento hoje — a mecânica de avaliação está em desenho, e esta página diz isso de propósito.
Candidatar-se para avaliar neurociência
Neurociência já vem pré-selecionada na candidatura. Vincule um perfil ORCID, uma listagem do bioRxiv ou um repositório de dados que possamos ler.