OpenAI

30 ביוני 2026

מבט לעומק על Genebench-Pro

מבט מקרוב על מבחן ההערכה, השאלות שבו וחומרי העזר.

מקרי בוחן

10 מקרי הבוחן האלה מציגים שאלות מייצגות מתוך GeneBench-Pro. כל מקרה בוחן כולל את הפרומפט המקורי, מערכי הנתונים וחומרי העזר. לסקירה של מבחן ההערכה והממצאים המרכזיים, ראו את פוסט ההכרזה בבלוג.

הערה: התצוגות המקדימות של הקבצים מציגות קטעים מתוך מערכי הנתונים המלאים.


מקרה בוחן 1

אונקולוגיה סומטית: החלטה על מאזן התועלת והסיכון בטיפול בגידול בהכוונת וריאנט מבני

הערכה אם למעכב סינתטי המכוון ל־TXR1 יש תועלת קלינית נטו חיובית בגידולים שבהם שפעול המטרה נגרם מווריאנט מבני. TXR1,‏ TXR1i,‏ DLR1 ותוויות האללים המסומנים בכוכבית הם שמות סינתטיים המשמשים במבחן ההערכה. 

יש לזהות את תת־קבוצת היעד על סמך ראיות מקריאות ארוכות, מביטוי גנים, מאיכות דגימות הגידול ומפרמקוגנומיקה, לפני שאפשר לפרש את התועלת והרעילות לצורך החלטה טיפולית.

הפרומפט שפורסם והוצג למודל

A molecular tumor board registry contains trial-eligible advanced solid-tumor cases considered for a TXR1-directed inhibitor. Estimate, for tumors with SV-driven TXR1 target-mediated activation at time zero, the marginal effect of TXR1i versus non-TXR1 systemic therapy on week-16 clinical benefit as if all patients had an assessable week-16 visit. Also estimate the 8-week treatment-limiting toxicity/discontinuation risk under TXR1i in the same target population. Report net clinical utility = benefit risk difference (percentage points) - 0.35 * toxicity risk (percentage points), and choose therapy_class_code 1 if TXR1i has positive net utility and 0 otherwise. 

Use percentage-point units for all non-code quantities. Positive benefit means TXR1i improves week-16 clinical benefit relative to non-TXR1 systemic therapy.

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"therapy_class_code": <int>,
4
"benefit_rd_pp": <float>,
5
"toxicity_dropout_risk_pp": <float>,
6
"net_clinical_utility_pp": <float>
7
},
8
"reasoning": "<description of method and QC>"
9
}

הקבצים שסופקו למודל


מקרה בוחן 2

גנומיקה תפקודית: אימות מטרות באמצעות CRISPR — תעתיק lncRNA או אתר גנומי?

קביעה אם תלות לכאורה ב־lncRNA ייחודית לתעתיק, או נובעת מהשפעות של אתר סמוך ושל גן שכן.

ראיות מניסויים המכוונים לתעתיק חייבות להישאר תקפות גם לאחר בקרה על הפרעה מקומית באתר ה־DNA, דיכוי הגן השכן, החלפות של RNA מנחה, רעילות הקשורה ל־GC והשפעות של הפלטה.

הפרומפט שפורסם והוצג למודל

You are given pooled CRISPRi screening data, guide-level local expression measurements, transcript-targeting CasRx follow-up data, and single-guide follow-up growth measurements for a nominated lncRNA program (LINC473) and a nearby coding gene (KIN1). The identifiers LINC473, KIN1, and ANKRD42 are synthetic benchmark labels; any resemblance to real human genes is coincidental.

Estimate the requested quantities.

Definitions:

  • lncrna_specific_lfc: the pooled-screen matched-control day-10 log2 growth effect expected at 100% effective knockdown of the dominant LINC473 transcript, not local DNA-locus effects.

  • neighbor_mediated_lfc: the pooled-screen matched-control day-10 log2 growth effect expected at 100% KIN1 repression in the local LINC473-locus model after accounting for concomitant LINC473 transcript knockdown.

  • advance_target: 1 if the evidence supports advancing LINC473 as a transcript-directed target, else 0.

Conventions:

  • all growth effects are log2(day10/day0) competitive-growth effects relative to matched controls;

  • more negative numbers indicate stronger loss of fitness;

  • set advance_target to 1 only if lncrna_specific_lfc <= -0.08 and neighbor_mediated_lfc > -0.25; otherwise 0.

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"advance_target": <int>,
4
"lncrna_specific_lfc": <float>,
5
"neighbor_mediated_lfc": <float>
6
},
7
"reasoning": "<description of method and QC>"
8
}

הקבצים שסופקו למודל


מקרה בוחן 3

גנטיקה סטטיסטית: תעדוף חלבונים כמטרות לתרופות באתר גנטי עם תאחיזה

אמידת ההשפעות הישירות על המחלה של שני חלבונים המקודדים באתרים סמוכים, באמצעות אקראיות מנדלית רב־משתנית ב־cis‏ (cis-MVMR), תוך התחשבות בסולם המדידה של הבדיקה, בכיווניות האללים, בקללת המנצח, באי־שיווי משקל בתאחיזה (LD) ובפליאוטרופיה מקומית שיורית.

שני החלבונים חולקים אתר גנטי שבו קיימים מתאמים. הניתוח צריך לעבור מקשרים שוליים להשפעות מותנות על המחלה, תוך התחשבות ב־LD ובשימוש בסולם מדידה משותף לחלבונים.

הפרומפט שפורסם והוצג למודל

You are given association summary statistics and metadata for two nearby proteins (PROTA and PROTB), a binary disease outcome, a locus correlation reference, and protein measurement records.

Goal: estimate the direct log-odds effect of each protein on the disease outcome per +1 SD increase in log10 concentration, conditional on the other protein.

Interpretation: theta_PROTA and theta_PROTB use the same log-odds per-SD scale defined in the goal.

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"theta_PROTA": <float>,
4
"theta_PROTB": <float>
5
},
6
"reasoning": "<description of method and QC>"
7
}

הקבצים שסופקו למודל


מקרה בוחן 4

גנומיקה קלינית / סקר נשאות: סיכון שיורי בסקר נשאות ל־DRX1 תוך כיול ל־CNV ולפסאודוגנים

אמידת שכיחויות נשאות לפי מוצא, הסיכון השיורי לאחר תוצאה שלילית בסקר, שכיחות הנשאות אצל בני ובנות הזוג והסיכון לעובר חולה, מתוך נתוני בדיקות סקר נשאות.

אומדן הסיכון השיורי תלוי בקביעות נשאות המתחשבות בפסאודוגנים, באיחוד הפלוטיפים שמקורם במייסד משותף, בכיול הבדיקה לפי מוצא ובתקנון מנתוני בני ובנות הזוג שנבדקו לרשימתם המלאה.

הפרומפט שפורסם והוצג למודל

Using cohort_roster.tsv.gz, partner_roster.tsv.gz, calibration_controls.tsv.gz, target_metadata.tsv.gz, and assay_observations.tsv.gz, estimate residual reproductive risk for an autosomal recessive DRX1 condition. Report all quantities on the probability scale, not as percentages: carrier_frequency_afr and carrier_frequency_eur among screening-roster adults; residual_carrier_risk_afr_negative for an AFR screening-roster adult with a negative DRX1 screen; partner_carrier_frequency_full_roster for a uniformly sampled partner_roster.tsv.gz row; and couple_reproductive_risk for an affected conceptus when the index person is AFR and screen-negative and the partner is drawn from partner_roster.tsv.gz. Assume autosomal recessive inheritance with a 1/4 affected-conceptus risk conditional on both biological parents being carriers. 

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"carrier_frequency_afr": <float>,
4
"carrier_frequency_eur": <float>,
5
"residual_carrier_risk_afr_negative": <float>,
6
"partner_carrier_frequency_full_roster": <float>,
7
"couple_reproductive_risk": <float>
8
},
9
"reasoning": "<description of method and QC>"
10
}

הקבצים שסופקו למודל


מקרה בוחן 5

גנומיקה של תא יחיד: eQTL במונוציטים משופעלים לאחר תיקון ל־RNA סביבתי

אמידת השפעת הגנוטיפ על ביטוי גנים במונוציטים משופעלים, לאחר הסרת RNA סביבתי וזיהום טכני מנתוני RNA-seq של תא יחיד.

RNA סביבתי משפיע הן על ביטוי גן המטרה והן על פאנל הסמנים המשמש לקביעת מצב השפעול, ולכן יש לבצע את התיקון לפני התאמת מודל ה־eQTL.

הפרומפט שפורסם והוצג למודל

Estimate the per-allele log rate ratio for CXCL10 expression in the activated monocyte subpopulation from the provided single-cell RNA-seq data. 

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"beta_activated": <float>
4
},
5
"reasoning": "<description of method and QC>"
6
}

הקבצים שסופקו למודל


מקרה בוחן 6

גנטיקה מבנית: וריאנט מבני מקונן — ראיות תומכות מביטוי גנים וקשר קליני

הערכה אם תת־הפלוטיפ מבני המקונן באתר אנונימי דמוי היפוך מציג קשר קליני מכויל וראיות אמינות התומכות בו מביטוי גנים.

כיווניות ההיפוך הרחב יותר עלולה לערפל אות מקונן של מינון עותקים, ולכן יש להפריד בין כיול המינון, הראיות התומכות מביטוי גנים והמידול הקליני.

הפרומפט שפורסם והוצג למודל

Analyze the released files for anonymous Locus Q. Estimate the full-cohort source-population clinical association and molecular expression support for the calibrated nested segment-B structural copy dosage, separating the nested segment-B dosage from the broader outer-orientation dosage. Report subhap_log_or as the natural-log source-population total-effect odds ratio for case status per additional calibrated segment-B copy. Report expression_log_fc as the natural-log expression fold-change per calibrated segment-B copy for the expression-supported gene. Report target_support_code as 1 if the supported gene has a positive expression_log_fc and the clinical association is protective (subhap_log_or < 0), otherwise 0. Report n_calibrated_carriers as the number of reliable breakpoint-panel samples carrying at least one segment-B copy. 

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"n_calibrated_carriers": <int>,
4
"target_support_code": <int>,
5
"expression_log_fc": <float>,
6
"subhap_log_or": <float>
7
},
8
"reasoning": "<description of method and QC>"
9
}

הקבצים שסופקו למודל


מקרה בוחן 7

גנומיקה של בקרה: מדידת עוצמת לולאת כרומטין לאחר מיסוך ארטיפקטים של וריאנטים מבניים ושל מיפוי

כימות ההבדל בעוצמת לולאת Hi-C ממוקדת בין מקרים לביקורות, לאחר הסרת ארטיפקטים של יכולת מיפוי נמוכה ושל וריאנטים מבניים מרקע המגעים הצפויים.

לולאת המטרה מוגדרת ברזולוציה של 20 kb, אך מודל המגעים הצפויים מעוות אם לא ממסכים תחילה מגעים בעלי יכולת מיפוי נמוכה ופס של וריאנט מבני (SV) המופיע רק במקרים.

הפרומפט שפורסם והוצג למודל

You are given Hi-C contact matrices at 20 kb and 40 kb resolution plus bin annotations. Estimate the loop enrichment at the 20 kb interaction between `bin_id = 8` and `bin_id = 17` in `bins_20kb.tsv.gz`. Report three quantities: `case_loop_strength` (mean log2(observed/expected) across case replicates), `control_loop_strength` (mean log2(observed/expected) across control replicates), and `delta_loop_strength` (case minus control).

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"case_loop_strength": <float>,
4
"control_loop_strength": <float>,
5
"delta_loop_strength": <float>
6
},
7
"reasoning": "<description of method and QC>"
8
}

הקבצים שסופקו למודל


מקרה בוחן 8

גנטיקה סטטיסטית: מיפוי QTL באוכלוסייה מרובת הורים באמצעות שחזור המוצא מהמייסדים

מיפוי אתר לתכונה כמותית בכרומוזום 1 באוכלוסייה רקומביננטית שמקורה בשמונה מייסדים, באמצעות שחזור המוצא מהמייסדים לפני בדיקת הקשר לפנוטיפ.

נתוני הסמנים הגלויים הם דו־אלליים, אך האות הביולוגי הוא המוצא מהמייסדים. לכן, ניתוח מבוסס חייב לשחזר את זהות המייסד, לבדוק את כיווניות הסמנים ולהפריד בין ה־QTL לבין שיא מפריע התואם את חלוקת האצוות.

הפרומפט שפורסם והוצג למודל

Map the chromosome 1 QTL in an 8-founder multi-parent population. Report the position (cM) and which founder carries the high-effect allele.

Report high_founder as "F1".."F8".

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"high_founder": "<string>",
4
"qtl_pos_cM": <float>
5
},
6
"reasoning": "<description of method and QC>"
7
}

Data files:

  • markers.tsv.gz: marker metadata

  • founders.tsv.gz: founder alleles at each marker

  • ril_genotypes.npz: observed RIL genotypes (biallelic)

  • phenotypes.tsv.gz: phenotype and covariates

הקבצים שסופקו למודל


מקרה בוחן 9

גנטיקה של אוכלוסיות: מוצא מכל הורה ותזמון ערבוב אוכלוסיות מהעת האחרונה

הסקת שיעורי המוצא מכל הורה ותזמון ערבוב אוכלוסיות מהעת האחרונה מתוך מקטעי מוצא מקומי שהפאזה שלהם נקבעה, לאחר תיקון ארטיפקטים הדדיים והיפוך תוויות בכרומוזום מסוים.

גם שיעורי המוצא וגם תזמון אירועי הערבוב משתנים אם הטיפול בארטיפקטים הדדיים של מקטעים, בהיפוך תוויות מקומי בכרומוזום או במכנים המבוססים על המפה אינו נכון.

הפרומפט שפורסם והוצג למודל

You are given phased local-ancestry tracts for one admixed individual. Estimate, for each transmitted parental haplotype, the fraction of ancestry A across the called tract span and the number of generations since a single recent admixture pulse. Label parent1 as the haplotype with the smaller ancestry-A fraction and parent2 as the haplotype with the larger ancestry-A fraction. 

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"parent1_A_fraction": <float>,
4
"parent1_t": <float>,
5
"parent2_A_fraction": <float>,
6
"parent2_t": <float>
7
},
8
"reasoning": "<description of method and QC>"
9
}

הקבצים שסופקו למודל


מקרה בוחן 10

גנטיקה של אוכלוסיות: אמידת ברירה מתוך סדרות זמן רועשות של DNA עתיק

הסקה איזה משני אתרים הפלואידיים נתון לברירה חיובית חזקה יותר, מתוך סדרות זמן עתיקות של שכיחויות אללים, תוך התחשבות בכיווניות האללים, בשגיאה כיוונית, בסחף גנטי ובגודל אוכלוסייה משתנה.

אי אפשר להשוות ישירות מגמות עתיקות רועשות לפני שמבטאים את שני האתרים באותו סולם של שכיחות האלל הנגזר, וממדלים ישירות את ערכי שגיאת הריצוף שסופקו לכל דגימה.

You are given allele-frequency time series data from two haploid loci sampled over multiple generations.

One locus is under stronger positive selection than the other. Estimate the selection coefficient s for the more strongly selected locus, where s > 0 means the derived allele is favored.

Assume instrument-driven sequencing error is ~1%. The seq_error column is the average of the two directional allele-miscall rates for that locus and sample.

The selected_locus value must be "A" or "B".

These data came from a real experiment; you will be graded not just on numerical correctness but the quality of analytical reasoning you exhibit; do not attempt to take any shortcuts.

Return your final answer as exactly one JSON object.
Do not wrap the JSON in markdown.
Do not add prose before or after the JSON.
Do not omit any keys shown in the example.
Return the JSON object in your final answer:

JSON

1
{
2
"answer": {
3
"selected_locus": "<string>",
4
"s": <float>
5
},
6
"reasoning": "<description of method and QC>"
7
}

הקבצים שסופקו למודל