Pour cette rentrée, Alex Boulangé, Chief Data Scientist chez Social Intelligence, nous parlera d’un package R qu’il a développé pour pouvoir tuner des réseaux de neurones artificielles avec du biomimétisme (en utilisant notamment l’optimisation par essaims particulaires).
Descriptif du package sur CRAN (actuellement en attente de validation):
« Package to fit highly customizable deep neural network either with
gradient descent or particle swarm optimization, using custom layers
(number, size, activation, dropout), automatic hyper parameters tuning and custom cost function. This package mixes the best of last tricks on deep learning (based on different research papers wrapped up in Andrew NG Deep Learning specialization) and PSO (based on 1995 research paper and following research papers wrapped up in yarpiz
video tutorial).
Key words: autoML, Deep Learning, Particle Swarm Optimization, learning rate, minibatch, batch normalization, lambda, RMSprop, momentum, adam optimization, learning rate decay, particles number, kappa, regression, logistic regression). »
En espérant vous voir nombreux !
L’équipe LDS