Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Improvements and additions to governance and model card elements #151

Open
bowni opened this issue Sep 7, 2021 · 0 comments
Open

Improvements and additions to governance and model card elements #151

bowni opened this issue Sep 7, 2021 · 0 comments
Labels
enhancement New feature or request question Further information is requested

Comments

@bowni
Copy link
Member

bowni commented Sep 7, 2021

List of topics to study to improve/complement the existing eval elements and answer items:

[GCI] Gouvernance des projets, carte d’identité des modèles

GCI1- Spécifications/Objectifs du modèle ou système d’IA : que doit-il accomplir ? Cette info doit être définie et documentée, et être accessible à toutes les parties prenantes élaboration + usage

GCI2- Une fois l’objectif connu, faire une analyse de risques préliminaire, des mésusages possibles du système d'IA : qu’est-ce qui pourrait mal se passer, quels problèmes le système pourrait générer ? Celle-ci doit être mise à jour à chaque étape introduisant des changements

GCI3- Introduire une notion d’auteur(s) d’un modèle, des bases de données, des métriques…

GCI4- Exigence de reproductibilité / répétabilité des modèles élaborés : la tester ? Documenter les éventuels cas de non-reproductibilité éventuels !

GCI5- Généalogie/Lifecycle : tracer tous les changements apportés au système d’IA

GCI6- Quelles ressources matérielles minimales sont nécessaires à l’entraînement et à l’usage en inférence ?

@bowni bowni added this to the release-2021H2 milestone Sep 7, 2021
@bowni bowni modified the milestones: release-2021H2, release-2022H1 Dec 2, 2021
@bowni bowni added enhancement New feature or request question Further information is requested labels Nov 30, 2022
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
enhancement New feature or request question Further information is requested
Projects
None yet
Development

No branches or pull requests

1 participant