https://jaalonso.github.io/vestigium/esContents © 2026 <a href="mailto:">José A. Alonso</a> <a rel="license" href="https://creativecommons.org/licenses/by-nc-sa/4.0/"> <img alt="Creative Commons License BY-NC-SA" style="border-width:0; margin-bottom:12px;" src="https://i.creativecommons.org/l/by-nc-sa/4.0/88x31.png"></a>Thu, 01 Oct 2026 12:59:56 GMTNikola (getnikola.com)http://blogs.law.harvard.edu/tech/rsshttps://jaalonso.github.io/vestigium/posts/2025/06/14-readings_shared_06-13-25/José A. Alonso<p>The readings shared in <a href="https://bsky.app/profile/jalonso.bsky.social">Bluesky</a> on 13 June 2025 are</p> <ul> <li><a href="https://arxiv.org/abs/2503.00959">Formalizing zeta and L-functions in Lean</a>. ~ David Loeffler, Michael Stoll. #ITP #LeanProver #Math</li> <li><a href="http://adam.chlipala.net/theses/teshome.pdf">Formal verification of relational algebra transformations in Fiat2 using Coq</a>. ~ Christian Teshome. #ITP #CoqProver #Rocq</li> <li><a href="https://arxiv.org/abs/2506.10048">Growing a modular framework for modal systems - HOLMS: a HOL Light library</a>. ~ Antonella Bilotta. #ITP #HOL_Light #Logic #Math</li> <li><a href="https://www.morph.so/blog/trinity">Trinity: an autoformalization system for verified superintelligence</a>. #Autoformalization #AIforMath #ITP #LeanProver</li> <li><a href="https://github.com/morph-labs/lean-abc-true-almost-always">The abc conjecture almost always — autoformalized</a>. ~ Jesse Michael Han et als. #Autoformalization #AIforMath #ITP #LeanProver</li> <li><a href="https://arxiv.org/abs/2506.06034">MATP-BENCH: Can MLLM be a good automated theorem prover for multimodal problems?</a> ~ Zhitao He et als. #AI #MLLMs #Math #ITP #IsabelleHOL #LeanProver #CoqProver #AIforMath</li> <li><a href="https://arxiv.org/abs/2506.07047">Mathesis: Towards formal theorem proving from natural languages</a>. ~ Yu Xuejun et als. #AI #LLMs #Math #ITP #LeanProver #AIforMath</li> <li><a href="https://arxiv.org/abs/2506.10558">StepProof: Step-by-step verification of natural language mathematical proofs</a>. ~ Xiaolin Hu, Qinghua Zhou, Bogdan Grechuk, Ivan Y. Tyukin. #LLMs #ITP #IsabelleHOL #Math #AIforMath</li> <li><a href="https://jaalonso.github.io/vestigium/posts/2025/06/13-resena-de-matp-bench-can-mllm-be-a-good-automated-theorem-prover-for-multimodal-problems/">Reseña de «MATP-BENCH: Can MLLM be a good automated theorem prover for multimodal problems?»</a>. #AI #MLLMs #Math #ITP #IsabelleHOL #LeanProver #CoqProver #AIforMath</li> <li><a href="https://jaalonso.github.io/vestigium/posts/2025/06/13-resena-de-mathesis-towards-formal-theorem-proving-from-natural-languages/">Reseña de «Mathesis: Towards formal theorem proving from natural languages»</a>. #AI #LLMs #Math #ITP #LeanProver #AIforMath</li> </ul>AIAIforMathAutoformalizationCoqProverHOL_LightIsabelleHOLITPLeanProverLLMsLogicMathMLLMsRocqhttps://jaalonso.github.io/vestigium/posts/2025/06/14-readings_shared_06-13-25/Sat, 14 Jun 2025 09:15:00 GMThttps://jaalonso.github.io/vestigium/posts/2025/06/13-matp-bench-can-mllm-be-a-good-automated-theorem-prover-for-multimodal-problems/José A. Alonso<p>En el artículo <a href="https://arxiv.org/abs/2506.06034">«MATP-BENCH: Can MLLM be a good automated theorem prover for multimodal problems?»</a>, los autores investigan la aplicabilidad de los modelos de lenguaje grandes multimodales (MLLMs) al problema de la demostración automática de teoremas que involucran componentes tanto textuales como visuales. Motivados por las limitaciones de los enfoques puramente textuales en dominios como la geometría, donde los diagramas constituyen información esencial, desarrollan un marco de evaluación sistemático para esta clase de problemas.</p> <p>La contribución principal consiste en la construcción de <a href="https://github.com/Zhitao-He/MATPBench">MATP-BENCH</a>, un conjunto de datos que contiene más de 1000 problemas matemáticos multimodales formalizados en tres asistentes de demostración: <a href="https://en.wikipedia.org/wiki/Lean_(proof_assistant)">Lean 4</a>, <a href="https://en.wikipedia.org/wiki/Rocq">Coq</a> e <a href="https://en.wikipedia.org/wiki/Isabelle_(proof_assistant)">Isabelle/HOL</a>. El corpus abarca problemas de complejidad variable, desde el nivel de secundaria hasta competiciones matemáticas avanzadas, proporcionando así un banco de pruebas comprehensivo para evaluar capacidades de razonamiento multimodal.</p> <p>Los experimentos incluyen seis modelos representativos: tres con capacidades especializadas de razonamiento (OpenAI-o1, Claude-3.7-Sonnet-Thinking, Gemini-2.0-Flash-Thinking) y tres sin estas capacidades (GPT-4.1, Qwen2.5-VL-Instruct-70B, Llama3.2-Vision-Instruct-11B). Los resultados revelan que, si bien los modelos demuestran competencia en la comprensión de problemas y formalización de enunciados, exhiben deficiencias significativas en la construcción de cadenas de inferencia válidas.</p> <p>El análisis establece que la principal limitación no radica en las capacidades de percepción visual sino en la insuficiencia del razonamiento simbólico formal. Los autores concluyen que los MLLMs actuales no constituyen demostradores automáticos efectivos para problemas multimodales, identificando la brecha entre comprensión multimodal y razonamiento lógico como el desafío fundamental a resolver.</p> <p>MATP-BENCH se posiciona como el primer banco de prueba estándar para este dominio, proporcionando una base metodológica para la evaluación de futuros desarrollos en demostración automática multimodal.</p>AIAIforMathCoqProverIsabelleHOLITPLeanProverMathMLLMshttps://jaalonso.github.io/vestigium/posts/2025/06/13-matp-bench-can-mllm-be-a-good-automated-theorem-prover-for-multimodal-problems/Fri, 13 Jun 2025 15:10:00 GMT