Home · AI nieuws

AI scheikunde: score is geen labproef

AI scheikunde krijgt een nieuwe dataset van NVIDIA. Bekijk een echte LitmusBench opgave en reken zelf het verschil tussen een logwaarde en mg/L na.

Probeer de eenhedencheck

Door Redactie WatisAI.nl ·

Onderzoekers vergelijken een antwoord op een laptop met een laboratoriummeting

18 november 2026

2.056regels in het gecontroleerde validatiebestand
62regels over logoplosbaarheid bij pH 6,8
1,70 mg/Lomgerekend uit het voorbeeldantwoord

Een goed antwoord over AI scheikunde kan een verkeerd getal lijken. In een echte LitmusBench opgave staat 0,23044892 als verwacht antwoord. Omgerekend is dat ongeveer 1,70 mg/L. Wie die 1,70 zonder omrekening invult, mist de gevraagde logwaarde.

NVIDIA presenteerde op 16 november Nemotron for Science, met modellen, wetenschappelijke evaluaties en trainingsrecepten. Wij bekeken het bijbehorende validatiebestand en zochten één antwoord terug in de oorspronkelijke Biogen data. Probeer hieronder zelf het verschil tussen een opgeslagen meetwaarde en een benchmarkantwoord.

Eén meting, twee getallen0,23044892log₁₀ van µg/mL100,23044892 ≈ 1,70 mg/L
Eigen omrekening van LitmusBench v0.2, validatieregel 1026. De oorspronkelijke Biogen rij Mol1543 vermeldt 0,230448921.

AI scheikunde: een score is nog geen labproef

Een benchmark beoordeelt een antwoord volgens een vooraf vastgelegde regel. In deze opgave gaat het om de oplosbaarheid van een molecuul bij pH 6,8. De verwachte uitkomst is een logwaarde; de toegestane absolute afwijking is 0,1.

Dat is nuttig om antwoorden reproduceerbaar te vergelijken. Het bewijst op zichzelf geen veilige proefopstelling, nieuwe meting of zelfstandig onderzoek. Onze controle gaat over bestanden en eenheden. Wij hebben Nemotron niet gedraaid en geen chemische proef gedaan.

OpgaveVoorspel een logwaarde
ControleVergelijk met opgeslagen antwoord
LabproefVraagt uitvoering en nieuwe meting
Een antwoordcontrole en een experiment leveren verschillend bewijs.

Probeer de logwaarde en de eenheid

Vul een getal in en kies wat het voorstelt. De helper rekent het terug naar de gevraagde logwaarde. Probeer eerst 1,70 met mg/L, daarna hetzelfde getal als logwaarde. De oorspronkelijke benchmark vraagt alleen de logwaarde, zonder deze omrekenhulp.

LitmusBench eenhedencheck

Referentie: 0,23044892. Absolute tolerantie: 0,1 op de logschaal. Deze helper vergelijkt met een bestaand antwoord; hij voorspelt geen stofeigenschap.

De oorspronkelijke rij staat er nog naast

In het volledige validatiebestand telden we 2.056 regels. Daarvan vragen er 62 naar LOG SOLUBILITY PH 6.8 (ug/mL). Voor ons voorbeeld verwijst de herkomstinformatie naar Biogen, met onder meer rij Mol1543. Daar staat dezelfde logwaarde, met één extra decimaal.

De omrekening is 100,23044892 ≈ 1,70 µg/mL. Omdat één milligram duizend microgram is en één liter duizend milliliter bevat, geldt 1 µg/mL = 1 mg/L. De 1,70 is dus geen tweede meetresultaat.

BestandWaarde voor Mol1543
Biogen CSV0,230448921
LitmusBench antwoord0,23044892
Onze omrekening≈ 1,70 mg/L
Zelf vergeleken op 18 november 2026. LitmusBench versie cf18cb1b2392d04a2ac578637462261d62da11d7, validatieregel 1026.

Open data verdient meer dan een grote autonomieclaim

Het sterkste aan deze publicatie is dat het antwoord, de scoreregel en de herkomst samen te controleren zijn. Een persbericht navertellen is daarvoor niet genoeg. Bij onze test van Nemotron Transcribe gold dezelfde beperking: een resultaat op één taak zegt weinig over alle andere taken.

Andersom is “geen autonoom laboratorium” ook geen reden om de dataset weg te zetten. Bestaande experimentele gegevens kunnen bruikbaar trainingsmateriaal zijn. Het zwakke punt van onze eigen oefening is haar eenvoud: één logaritme zegt niets over hoe goed een model onbekende moleculen voorspelt.

Wel gecontroleerd

Bestandsomvang, voorbeeldantwoord, herkomst en omrekening.

Niet gemeten

Modelnauwkeurigheid, autonome experimenten of veiligheid van protocollen.

De grens van deze eigen bestandstest.

Kun je deze dataset zelf hergebruiken?

Controleer bij die beslissing de licentie per vraag. De datasetkaart noemt CC BY SA 4.0 voor vragen met ChEMBL gegevens en OpenMDW 1.1 voor de overige vragen. Ons voorbeeld is als OpenMDW 1.1 gelabeld. De licentie van de dataset is geen licentie voor het model.

  1. Open het recordBewaar de versie, herkomst en eenheid.
  2. Reken het antwoord naHoud logwaarde en concentratie uit elkaar.
  3. Beoordeel de claimVraag voor een nieuw experiment om een nieuwe meting.

Bij een volgende evaluatie telt of dezelfde aanpak standhoudt op andere, niet voor training gebruikte gegevens. Dat vraagt een aparte test. Onze controle van Qwen gewichten laat ook zien waarom een bestandscontrole en een nieuwe benchmarkrun afzonderlijk bewijs vragen. De basis over wat is AI helpt om modellen en hun toepassingen uit elkaar te houden.

Bronnen: NVIDIA Newsroom, aankondiging 16 november 2026; NVIDIA Technical Blog, 16 november 2026; LitmusBench v0.2 datasetkaart en validatiebestand, geraadpleegd 18 november 2026; Biogen Computational ADME, openbare brondata. Datasetvoorbeeld onder OpenMDW 1.1. Berekening en omrekenhulp: Redactie WatisAI.nl.

Hetzelfde antwoord, een andere schaal

Probeer 1,70 als mg/L en als logwaarde. De uitkomst verandert.

Probeer de eenhedencheck