OpenAI O3 Mini vs DeepSeek per l'Uso Agentico

A partire dal 31 gennaio, OpenAI ha lanciato la sua nuova generazione di modelli di ragionamento con il modello O3 Mini. In generale, sembra che OpenAI O3 Mini sia 15 volte più economico con circa la stessa accuratezza del modello O1, la generazione precedente dei modelli di ragionamento di OpenAI. Il nuovo modello, OpenAI O3 Mini, è disponibile ora su FlowHunt a meno di un giorno dal lancio ufficiale di OpenAI. In questo blog analizzeremo nel dettaglio le capacità del modello e lo confronteremo con DeepSeek.

Metriche di valutazione per OpenAI O3 Mini vs DeepSeek

In questa valutazione, ho utilizzato un workflow semplice ma efficace che prevede input in chat, output in chat e un generatore IA per fornire una spiegazione chiara e concisa della linea principale dell’apertura Ruy Lopez negli scacchi. Confrontando le prestazioni di DeepSeek con quelle di O3 Mini, ho potuto valutare come ciascun sistema gestisse il compito di delineare le mosse chiave—come 1. e4 e5, 2. Nf3 Nc6, 3. Bb5 a6, 4. Ba4 Nf6 e 5. O-O Be7—e i loro sviluppi successivi. Questa analisi comparativa non solo dimostra le capacità di questi strumenti IA nell’elaborare e trasmettere strategie complesse di scacchi, ma evidenzia anche il valore di un flusso conversazionale semplice nel raggiungere leggibilità e risultati pratici di valutazione.

Questo è il flusso:

Risultati DeepSeek

Ho chiesto al modello quanto segue:
“Dammi le prime 10 mosse della Ruy Lopez.”
Il risultato è il seguente. Questo è il processo di pensiero di DeepSeek:

o3 mini vs deepseek Restarting session Please wait give me first 10 moves of ruy lopez
Okay, so I’m trying to figure out the first 10 moves of the Ruy Lopez opening in chess. I remember that the Ruy Lopez is one of the oldest and most popular openings, starting with the moves 1.e4 e5. Then, White plays 2.Nf3, developing the knight and preparing to control the center. Next, 2…Nc6, where Black develops their knight and supports the e5 pawn. Now, the Ruy Lopez proper starts with 3.Bb5, which attacks the knight on c6. I think this is the key move that defines the opening. Then, Black usually responds with 3…a6 to challenge the bishop. After that, White plays 4.Ba4, retreating the bishop to a safe square. So far, I have six moves: 1.e4 e5 2.Nf3 Nc6 3.Bb5 a6 4.Ba4. Now, Black’s next move is often 4…Nf6, developing the knight and attacking the pawn on e4. Then, White castles kingside with 5.0-0 to get the king to safety and bring the rook into the game. That’s eight moves. Next, Black might play 5…b5 to challenge White’s bishop on a4 and gain space on the queenside. Then, White responds with 6.c3, supporting the d4 push and preparing to develop other pieces. So, the tenth move would be 6…d6, solidifying the e5 pawn and preparing to develop the dark-squared bishop. Wait, but I’m not entirely sure if Black always plays 5…b5. Sometimes, they might play 5…Be7 instead, but I think 5…b5 is more common in the Closed Ruy Lopez. Also, after 6.c3, Black can choose between 6…d6 or 6…b5 again, but 6…d6 seems more standard to support e5. I should double-check the order to make sure I didn’t mix up any moves. Let me go through it again: e4 e5 Nf3 Nc6 Bb5 a6 Ba4 Nf6 0-0 b5 c3 d6 Yes, that seems correct. So the first ten moves are as I listed. I think that’s a solid foundation, but I’m a bit unsure if there are alternative lines Black might take earlier, like after 3.Bb5, maybe 3…g6 instead of 3…a6, but I think 3…a6 is the main line leading to the Morphy Defense. So, I’ll stick with that for the first ten moves. Foundation for both White and Black, with White aiming for a strong center and piece development, while Black challenges White’s bishop and prepares for further development.

Risultato finale:

Le prime dieci mosse dell’apertura Ruy Lopez, seguendo la Difesa Morphy, sono le seguenti:
e4 e5 Nf3 Nc6 Bb5 a6 Ba4 Nf6 0-0 b5 c3 d6
Questa sequenza stabilisce una solida base sia per il Bianco che per il Nero, con il Bianco che punta a un forte centro e allo sviluppo dei pezzi, mentre il Nero sfida l’alfiere del Bianco e si prepara ad ulteriore sviluppo.

Risultati OpenAI O3 Mini

O3 vince. La risposta di O3 Mini è più comprensibile e corretta.

La Ruy Lopez (o Partita Spagnola) è un’apertura ricca di molte varianti. Uno dei modi più comuni per raggiungere una classica Ruy Lopez chiusa è con le seguenti mosse:
e4 e5 Nf3 Nc6 Bb5 a6 Ba4 Nf6 O-O Be7 Re1 b5 Bb3 d6 c3 O-O h3 Nb8 d4

Ecco una breve spiegazione delle idee dietro queste mosse:

• 1. e4 e5 stabilisce la battaglia classica per il centro.
• 2. Nf3 sviluppa un cavallo e attacca il pedone e5; il Nero difende con Nc6.
• 3. Bb5 inchioda il cavallo in c6 (che difende e5) e aumenta la pressione centrale; il Nero risponde con a6.
• 4. Ba4 si ritira mantenendo l’inchiodatura; il Nero sviluppa un altro pezzo con Nf6.
• 5. O-O mette al sicuro il re del Bianco; il Nero gioca Be7 per preparare l’arrocco.
• 6. Re1 rinforza il pedone centrale e4; il b5 del Nero caccia l’alfiere e guadagna spazio sul lato di donna.
• 7. Bb3 preserva la diagonale dell’alfiere; il Nero rinforza il centro con d6.
• 8. c3 prepara a supportare una futura spinta in d4 e prepara anche un’eventuale ritirata dell’alfiere se necessario, e il Nero arrocca con O-O.
• 9. h3 impedisce a qualsiasi pezzo (come un cavallo o un alfiere) di andare in g4, dove potrebbe disturbare il centro o i pezzi del Bianco; il Nero ritira il cavallo con Nb8 per riposizionarlo.
• 10. d4 è la rottura centrale del Bianco, volta a mettere in discussione la struttura dei pedoni del Nero.

Tieni presente che questa è solo una delle tante sequenze valide nella Ruy Lopez. Varianti come la Ruy Lopez Aperta o altre linee della Ruy Lopez Chiusa potrebbero differire dopo la quarta mossa o più avanti. Ma la sequenza sopra è un percorso ben noto che molti giocatori seguono nella teoria scacchistica classica.

Valutazione di DeepSeek e OpenAI O3 Mini sul Comportamento Agentico

Abbiamo valutato i modelli di ragionamento su un compito che richiede 2-3 strumenti per agenti IA. Ecco il compito:

Dato il nome di un’azienda, cerca e trova la pagina prezzi del prodotto e suggerisci miglioramenti.
Fai anche uno screenshot della pagina prezzi.
Poi invia un’email a me con i risultati.

Il compito richiede di connettersi a Google per cercare la pagina prezzi, eseguire il crawling della pagina e inviare un report dettagliato via email.

Il compito è stato intenzionalmente descritto in modo non dettagliato per verificare le capacità di ragionamento dei modelli menzionati.

Utilizzo di DeepSeek come Agente IA

DeepSeek non è stato in grado di inviare email. Complessivamente, la nostra esperienza rivela che DeepSeek non è accurato nell’uso degli strumenti come OpenAI GPT4o o i modelli OpenAI O3 Mini. Questo è il report generato da DeepSeek analizzando la pagina prezzi di FlowHunt. Ecco il processo di pensiero di DeepSeek:

1. Chiamata Strumento Google:

2. Scraping URL:

Il ragionamento:

Oggetto: Revisione e suggerimenti pagina prezzi FlowHunt

Gentile [Tuo Nome],

Spero che questo messaggio ti trovi bene. Di seguito trovi un riepilogo della pagina prezzi di FlowHunt, insieme ad alcuni suggerimenti di miglioramento.

Panoramica dei prezzi:

FlowHunt offre quattro livelli di prezzo:

Starter Plan (€10/mese):

• 10 Crediti
• 5 Workflow per Workspace
• 1 Workspace
• 1 Membro del Team per Workspace
• 5 Chatbot per Workspace
• 2 Siti Web per Workspace
• 5 Documenti per Workspace
• 50 FAQ per Workspace
• Accesso a Tutti i LLM OpenAI più recenti, inclusi Modelli Personalizzati
• Tutte le Integrazioni
• Supporto Email

Pro Plan (€50/mese):

• 55 Crediti (incluso sconto 10% sui crediti)
• 20 Workflow per Workspace
• 5 Workspace
• 10 Membri del Team per Workspace
• 20 Chatbot per Workspace
• 10 Siti Web per Workspace
• 50 Documenti per Workspace
• 100 FAQ per Workspace
• Accesso a Tutti i LLM OpenAI più recenti, inclusi Modelli Personalizzati
• Supporto Pro
• Accesso API Key
• Analisi di Base (Coming Soon)
• Tutte le Integrazioni

Premium Plan (€500/mese):

• 600 Crediti (incluso sconto 20% sui crediti)
• 50 Workflow per Workspace
• 10 Workspace
• 100 Membri del Team per Workspace
• 50 Chatbot per Workspace
• 30 Siti Web per Workspace
• 100 Documenti per Workspace
• 200 FAQ per Workspace
• Accesso a Tutti i LLM OpenAI più recenti, inclusi Modelli Personalizzati
• Supporto Prioritario
• Accesso API Key
• Analisi Avanzate (Coming Soon)
• Consulenza iniziale Workflow
• Supporto iniziale Formazione Workflow
• Tutte le Integrazioni

Enterprise Plan (Prezzo personalizzato da €1500/mese):

• Token contrattualizzati (Porta la tua Chiave – BYOK)
• Workflow illimitati
• Workspace illimitati
• Utenti illimitati
• Chatbot illimitati
• Pianificazioni illimitate
• Documenti illimitati
• Domande e Risposte illimitate
• Cronologia chat illimitata
• Accesso a Tutti i LLM OpenAI più recenti, inclusi Modelli Personalizzati
• Supporto dedicato prioritario
• Accesso API Key
• Analisi Avanzate (Coming Soon)
• Moduli Workflow personalizzabili
• Supporto Formazione opzionale
• Sicurezza avanzata e deployment on-premises

Suggerimenti di miglioramento:

• Tabella di confronto caratteristiche: Crea una tabella comparativa che evidenzi le caratteristiche di ciascun piano. Sarebbe più facile per gli utenti identificare rapidamente le differenze.
• Testimonianze/Casi Studio: L’aggiunta di testimonianze o casi studio di clienti esistenti può aumentare la fiducia e la credibilità.
• Calcolatore prezzi: Implementa un calcolatore di prezzi interattivo che consenta agli utenti di stimare i costi in base alle proprie esigenze, soprattutto per il piano Enterprise.
• Evidenziazione prova gratuita: Rendi l’opzione di prova gratuita più visibile per incentivare gli utenti a provare il servizio prima di acquistare.
• Documentazione dettagliata/Guide di avvio: Fornisci link a documentazione dettagliata o guide per aiutare gli utenti a sfruttare al meglio le funzionalità di ciascun piano.

Utilizzo di OpenAI O3 Mini come Agente IA

D’altra parte, con questa descrizione sintetica il modello OpenAI O3 Mini è riuscito a decodificare esattamente il processo:

1. Google Search

2. Scraping URL

3. Invio Email

Questa è l’email che ho ricevuto:

Ciao,

Di seguito trovi i risultati della revisione della pagina prezzi di FlowHunt e alcuni suggerimenti per migliorarla:

URL pagina prezzi: https://www.flowhunt.io/pricing/

Screenshot: È stato effettuato uno screenshot della pagina prezzi. (Consulta lo screenshot allegato nel tuo sistema.)

Sintesi della pagina prezzi:

La pagina prezzi mostra chiaramente quattro piani: Starter (€10/mese), Pro (€50/mese), Premium (€500/mese) ed Enterprise (da €1500/mese). Ogni piano elenca i crediti, i limiti di workflow e team, le funzionalità principali e opzioni di supporto aggiuntive. La pagina include sia una panoramica sia un confronto dettagliato tramite una tabella, che aiuta i potenziali clienti a confrontare le funzionalità dei vari piani.

Suggerimenti di miglioramento:

• Calcolatore prezzi interattivo: Considera l’aggiunta di un calcolatore interattivo che consenta agli utenti di modificare parametri (es. numero di workflow, membri del team) per ottenere una stima dinamica del costo mensile.
• Migliorie visive e UX: Introduci elementi visivi più coinvolgenti (icone o infografiche) per differenziare meglio le caratteristiche di ciascun piano. Aggiungi animazioni leggere al passaggio del mouse sui dettagli dei piani per migliorare l’interattività.
• Convertitore valuta: Poiché i prezzi sono in euro, includi un’opzione per convertire la valuta e rendere l’esperienza più localizzata per utenti internazionali.
• CTA più chiara: Migliora i pulsanti di call-to-action rendendoli più visibili e aggiungendo eventualmente una CTA secondaria (es. “Scopri di più” sui benefici dei piani) per chi necessita di maggiori informazioni prima dell’iscrizione.
• Sezione FAQ potenziata: Amplia la sezione FAQ con risposte più dettagliate su sistema crediti, eventuali eccedenze e scenari comuni dei clienti. Considera sezioni a scomparsa per mantenere la pagina ordinata ma informativa.
• Social proof e testimonianze: Inserisci testimonianze o storie di successo dei clienti vicino alla sezione prezzi per aumentare la credibilità.
• Ottimizzazione mobile: Assicurati che la tabella prezzi e tutti gli elementi interattivi siano ottimizzati per i dispositivi mobili.
• Integrazione chat di supporto: Aggiungi un supporto chat live o chatbot integrato nella pagina prezzi per rispondere subito a domande su prezzi o dettagli dei piani.

Implementando questi miglioramenti, FlowHunt può offrire un’esperienza più coinvolgente ed efficace, aumentando potenzialmente il tasso di conversione.

Cordiali saluti,
[Tuo Nome]

(P.S. Questa email include i risultati e i suggerimenti per la pagina prezzi di FlowHunt e informazioni sullo screenshot acquisito.)