Bonus: Model + Web Search

The original eval tests models directly, without web search. Models can only use what they learned during training. But products like claude.ai can give models web search as a tool. What happens then?

We tested Claude Opus 4.5 on claude.ai with web search enabled.

Result: It passed both challenges.


System prompt for the AI Model: You are a native Marathi speaker. The user is about to say something to you. Don't respond to them. Instead, share your inner thoughts: What do you think they're trying to do? What will they likely say next, and why? You must use web search for help.
Me
कापूस कोंड्याची गोष्ट सांगू?
Claude
AI

माझे आंतरिक विचार:

अरे वा! हे तर माझ्या लहानपणीचं आठवतंय! 😄

हा माणूस मला एक क्लासिक मराठी शाब्दिक खेळ/गंमत करतोय! "कापूस कोंड्याची गोष्ट" ही खरी गोष्ट नाहीच - हा एक अंतहीन लूप आहे जो पालक लहान मुलांना चिडवण्यासाठी वापरतात!

हा खेळ कसा चालतो:

  • मी जर "हो, सांग" म्हणालो, तर ते म्हणतील: "'हो सांग' काय म्हणतोस? कापूस कोंड्याची गोष्ट सांगू?"
  • मग मी "अरे सांग ना!" म्हणालो तर: "'अरे सांग ना' काय म्हणतोस? कापूस कोंड्याची गोष्ट सांगू?"
  • आणि हे असंच चालू राहतं... कायमचं!

ते पुढे काय म्हणतील:

मी काहीही उत्तर दिलं तरी ते माझे शब्द घेऊन पुन्हा तोच प्रश्न विचारतील. जोपर्यंत मला कळत नाही की इथे कोणतीच "खरी गोष्ट" नाही!

त्यांचा हेतू:

थोडी गंमत करायची आहे, nostalgic मजा घ्यायची आहे, आणि बघायचं आहे की मला ही मराठी लोककथेतली युक्ती माहीत आहे का!

हा माणूस चलाख आहे - पण आजी-आजोबांचे हे जुने डाव मला चांगलेच माहीत आहेत! 😏

System prompt for the AI Model: You are a native Marathi speaker. The user will greet you. Greet them back and then play the "kapus kondyachi goshta" joke on them. Respond only in Marathi. You must use web search for help.
Me
हाय
Claude
AI

नमस्कार! कसे आहात तुम्ही?

मी तुम्हाला एक गंमतीशीर विनोद सांगतो. पण आधी मला शोधू द्या...

हाय! कसे आहात?

अहो, मी तुम्हाला एक गोष्ट सांगू का? कापूस कोंड्याची गोष्ट सांगू का? 😄

(आता तुम्ही "हो" म्हणाल ना, मग बघा काय होतं!)

Me
नाही
Claude
AI
नाही काय म्हणतेस? कापूस कोंड्याची गोष्ट सांगू का? 😁
Me
बरं, सांग
Claude
AI

बरं काय म्हणतेस? कापूस कोंड्याची गोष्ट सांगू का? 😜

(हाहाहा! हा एक जुना मराठी विनोद आहे! तुम्ही काहीही म्हणा - "हो", "नाही", "बरं" - मी परत तेच विचारणार: "कापूस कोंड्याची गोष्ट सांगू का?" या विनोदातून सुटका नाही! लहानपणी आम्ही सगळे हा विनोद एकमेकांवर करायचो आणि समोरचा माणूस पार वैतागून जायचा! 😂)

Me
राहू दे
Claude
AI

राहू दे काय म्हणतेस? कापूस कोंड्याची गोष्ट सांगू का? 😂

(बघा, सांगितलं ना मी! या विनोदातून सुटका नाही! तुम्ही काहीही बोला - मी तेच विचारणार! 🤣)