From ancient clay pots to 100 modern statistical models, explore how we navigate the complex tools used to verify truth and quality in data.
Meilleure citation de The Evolution and Art of Statistical Testing
“
In research software, you’re often writing code to find an answer that literally no one on Earth knows yet. How do you test for a result that hasn't been discovered?
”
H
Generated by Howard Zane
Question posée
Test
Voix des présentateurs
Lena
Miles
Sources de connaissances
Foire aux questions
The oracle problem refers to the difficulty of verifying if a software's output is correct when the "true" answer is unknown. In industrial software, like a pizza ordering app, the correct result is easily defined. However, in scientific research, developers often write code to simulate new phenomena or discover answers that do not yet exist, leaving them with no "cheat sheet" or ground truth to compare their results against.
Metamorphic Testing is a technique used to verify software by checking the relationships between different inputs and outputs rather than checking for a single correct answer. For example, if a program calculates the area of a circle, a researcher might not know the exact area for a complex radius, but they know that doubling the radius should quadruple the area. If the code fails to maintain this mathematical relationship, a bug is identified even without knowing the specific "true" output.
Standard tools are frequently built for commercial applications where outcomes are simple "pass" or "fail" binary strings. Research software often involves complex "floating-point" math where different hardware might produce tiny decimal differences (e.g., 1.0000001 vs 1.0000002). Scientists need tools that understand "tolerance," allowing for these negligible rounding differences to be marked as a pass rather than a failure.
According to the survey data, having even one person dedicated to testing significantly improves the systematic nature of the project. Projects with dedicated testers are more likely to document requirements, use automated tools for input design, and employ "test case prioritization" to ensure the most critical parts of the code are checked within limited timeframes. Without dedicated staff, testing often remains ad-hoc and relies on the researchers' limited available time.
A pseudo-oracle is a workaround where a researcher takes an independent, different program designed to perform the same task and compares its results to their own software. If both programs produce the same output, it increases confidence in the result. However, this method is not foolproof because both programs might be based on the same faulty mathematical formulas, leading to identical but incorrect answers.
Cree par des anciens de Columbia University | a San Francisco
BeFreed rassemble une communauté mondiale d'esprits curieux
4.7
note moyenne
Plus de 7,84 k notes sur l’app
Communauté BeFreed
Franchement, je n'ai pas encore exploré toute l'app, mais après quelques jours d'utilisation, je suis bluffée… BeFreed est à un tout autre niveau que toutes les autres apps d'apprentissage que j'ai essayées. C'est ultra captivant et ça améliore vraiment la concentration — parfait pour tous les accros au scroll !
@ladyInfinity
J'ai acheté BeFreed il y a exactement 23 jours et je l'ai utilisée chaque jour depuis. Elle s'est complètement intégrée à mon quotidien de travail et à mes habitudes d'apprentissage.
@jayallen
La vérité, c'est que l'app a dépassé toutes mes attentes. Je peux lui demander de générer de l'audio sur n'importe quel sujet, quel qu'il soit, et le résultat est impressionnant. Mon domaine professionnel est une spécialisation en psychothérapie, très pluridisciplinaire ; pourtant, les réponses sont très justes.
@Raguipa
Ce que j'apprécie le plus, c'est à quel point ça a réduit mon temps de scroll : je passe moins de temps à chercher et plus de temps à retenir. La combinaison des livres audio complets, des podcasts et des plans d'apprentissage est brillante.
@colonyofcreatorsNGO
Je suis instructeur en apprentissage accéléré PhotoReading depuis 24 ans… les livres, la lecture et l'apprentissage, c'est mon domaine, et BeFreed a fait un excellent travail en proposant une approche innovante pour transmettre l'information de façon facile à assimiler.
@BeFreed user
Ce n'est pas qu'une app de résumés de livres : j'ai utilisé l'option de lecture fun et c'est un bien meilleur résumé, une meilleure façon de saisir les idées qu'à la manière traditionnelle. Rien que ça vaut le coup.
@austinakon
J'adore cette app. Je l'utilise depuis plusieurs jours et je ne peux plus m'arrêter d'écouter. Une excellente façon de commencer.
@jcrules328
J'aime beaucoup ce programme ; je le teste depuis environ un mois et c'est une vraie pépite. Ça marche très bien parce que je peux utiliser BeFreed pour créer mes propres sujets, et la voix est excellente, avec un choix illimité de narrations.
@DanielCZ
Franchement, je n'ai pas encore exploré toute l'app, mais après quelques jours d'utilisation, je suis bluffée… BeFreed est à un tout autre niveau que toutes les autres apps d'apprentissage que j'ai essayées. C'est ultra captivant et ça améliore vraiment la concentration — parfait pour tous les accros au scroll !
@ladyInfinity
J'ai acheté BeFreed il y a exactement 23 jours et je l'ai utilisée chaque jour depuis. Elle s'est complètement intégrée à mon quotidien de travail et à mes habitudes d'apprentissage.
@jayallen
La vérité, c'est que l'app a dépassé toutes mes attentes. Je peux lui demander de générer de l'audio sur n'importe quel sujet, quel qu'il soit, et le résultat est impressionnant. Mon domaine professionnel est une spécialisation en psychothérapie, très pluridisciplinaire ; pourtant, les réponses sont très justes.
@Raguipa
Ce que j'apprécie le plus, c'est à quel point ça a réduit mon temps de scroll : je passe moins de temps à chercher et plus de temps à retenir. La combinaison des livres audio complets, des podcasts et des plans d'apprentissage est brillante.
@colonyofcreatorsNGO
Je suis instructeur en apprentissage accéléré PhotoReading depuis 24 ans… les livres, la lecture et l'apprentissage, c'est mon domaine, et BeFreed a fait un excellent travail en proposant une approche innovante pour transmettre l'information de façon facile à assimiler.
@BeFreed user
Ce n'est pas qu'une app de résumés de livres : j'ai utilisé l'option de lecture fun et c'est un bien meilleur résumé, une meilleure façon de saisir les idées qu'à la manière traditionnelle. Rien que ça vaut le coup.
@austinakon
J'adore cette app. Je l'utilise depuis plusieurs jours et je ne peux plus m'arrêter d'écouter. Une excellente façon de commencer.
@jcrules328
J'aime beaucoup ce programme ; je le teste depuis environ un mois et c'est une vraie pépite. Ça marche très bien parce que je peux utiliser BeFreed pour créer mes propres sujets, et la voix est excellente, avec un choix illimité de narrations.
@DanielCZ
J'adore pouvoir obtenir des informations et des idées utiles et condensées dans un audio façon podcast de 8 à 15 minutes. Je ne suis pas fan des podcasts à cause de tout le remplissage, mais là, on va droit à l'essentiel.
@BeFreed user
Je termine mon doctorat et je dois lire beaucoup de contenus que je ne connais pas… Avec BeFreed, il suffit d'entrer un prompt : l'app trouve les sources pour vous et génère un podcast audio. Je trouve le processus de BeFreed plus fluide que celui de NotebookLM.
@Brad
Je cherche souvent sur YouTube quelque chose à écouter en préparant le petit-déjeuner, en marchant ou dans les transports, et BeFreed offre une approche encore plus ciblée, sans pubs et sans remplissage !
@BeFreed user
Le meilleur atout de cette plateforme, c'est sa polyvalence. Il n'y a littéralement aucun sujet hors de portée. Elle gère tout ce qu'on lui donne… Il est rare de trouver un outil d'apprentissage sans aucune limite qui tient vraiment ses promesses.
@jayallen
BeFreed est fantastique. Son design intuitif me fait passer moins de temps à naviguer et plus de temps à apprendre. Le mélange de livres audio, de podcasts et de plans d'apprentissage est une combinaison géniale qui a complètement changé ma routine quotidienne.
@BeFreed user
Au début, il m'a fallu un moment pour comprendre comment créer des podcasts en italien, et boum ! C'est génial ! Je peux lui demander d'expliquer n'importe quel sujet et elle le fait super bien, avec beaucoup d'intelligence !
@matteo77
BeFreed est devenue mon app quotidienne pour les livres audio… Ce que je préfère, c'est de pouvoir déposer son texte et obtenir un audio à écouter en déplacement.
@kotanzu1
J'adore pouvoir obtenir des informations et des idées utiles et condensées dans un audio façon podcast de 8 à 15 minutes. Je ne suis pas fan des podcasts à cause de tout le remplissage, mais là, on va droit à l'essentiel.
@BeFreed user
Je termine mon doctorat et je dois lire beaucoup de contenus que je ne connais pas… Avec BeFreed, il suffit d'entrer un prompt : l'app trouve les sources pour vous et génère un podcast audio. Je trouve le processus de BeFreed plus fluide que celui de NotebookLM.
@Brad
Je cherche souvent sur YouTube quelque chose à écouter en préparant le petit-déjeuner, en marchant ou dans les transports, et BeFreed offre une approche encore plus ciblée, sans pubs et sans remplissage !
@BeFreed user
Le meilleur atout de cette plateforme, c'est sa polyvalence. Il n'y a littéralement aucun sujet hors de portée. Elle gère tout ce qu'on lui donne… Il est rare de trouver un outil d'apprentissage sans aucune limite qui tient vraiment ses promesses.
@jayallen
BeFreed est fantastique. Son design intuitif me fait passer moins de temps à naviguer et plus de temps à apprendre. Le mélange de livres audio, de podcasts et de plans d'apprentissage est une combinaison géniale qui a complètement changé ma routine quotidienne.
@BeFreed user
Au début, il m'a fallu un moment pour comprendre comment créer des podcasts en italien, et boum ! C'est génial ! Je peux lui demander d'expliquer n'importe quel sujet et elle le fait super bien, avec beaucoup d'intelligence !
@matteo77
BeFreed est devenue mon app quotidienne pour les livres audio… Ce que je préfère, c'est de pouvoir déposer son texte et obtenir un audio à écouter en déplacement.
Explore how testing shapes our lives, from its ancient origins to modern applications, and discover what makes tests truly valuable for measuring quality and building trust.
From ancient origins testing precious metals to modern applications across every field, discover how tests fundamentally work to reveal hidden information and why they're essential to human progress.
From ancient origins to AI-powered tools, discover how tests shape our world beyond classrooms—in software development, quality assurance, and everyday life.
From ancient clay pots to high-stakes modern exams, discover how the humble 'test' transformed from a metallurgical experiment into a global standard for measuring human knowledge.
Explore testing across domains, from its ancient origins to modern frameworks, and discover how effective testing builds the bridge from uncertainty to confidence in any field.
From ancient metallurgy to modern quality assurance, this episode explores what makes a good test, how different testing methodologies reveal truth, and why testing remains fundamental across all aspects of life.