Some content of this application is unavailable at the moment.
If this situation persists, please contact us atFeedback&Contact
1. (WO2018215665) TRAINING ACTION SELECTION NEURAL NETWORKS USING LOOK-AHEAD SEARCH
Latest bibliographic data on file with the International BureauSubmit observation

Pub. No.: WO/2018/215665 International Application No.: PCT/EP2018/063869
Publication Date: 29.11.2018 International Filing Date: 28.05.2018
IPC:
G06N 3/00 (2006.01) ,G06N 3/04 (2006.01) ,G06N 3/08 (2006.01) ,G06N 5/00 (2006.01)
G PHYSICS
06
COMPUTING; CALCULATING; COUNTING
N
COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS
3
Computer systems based on biological models
G PHYSICS
06
COMPUTING; CALCULATING; COUNTING
N
COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS
3
Computer systems based on biological models
02
using neural network models
04
Architecture, e.g. interconnection topology
G PHYSICS
06
COMPUTING; CALCULATING; COUNTING
N
COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS
3
Computer systems based on biological models
02
using neural network models
08
Learning methods
G PHYSICS
06
COMPUTING; CALCULATING; COUNTING
N
COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS
5
Computer systems utilizing knowledge based models
Applicants:
DEEPMIND TECHNOLOGIES LIMITED [GB/GB]; 6 Pancras Square London N1C 4AG, GB
Inventors:
SIMONYAN, Karen; GB
SILVER, David; GB
SCHRITTWIESER, Julian; GB
Agent:
KUNZ, Herbert; DE
Priority Data:
62/511,94526.05.2017US
Title (EN) TRAINING ACTION SELECTION NEURAL NETWORKS USING LOOK-AHEAD SEARCH
(FR) RÉSEAUX NEURONAUX DE SÉLECTION D'ACTION D'APPRENTISSAGE UTILISANT UNE RECHERCHE ANTICIPÉE
Abstract:
(EN) Methods, systems and apparatus, including computer programs encoded on computer storage media, for training an action selection neural network. One of the methods includes receiving an observation characterizing a current state of the environment; determining a target network output for the observation by performing a look ahead search of possible future states of the environment starting from the current state until the environment reaches a possible future state that satisfies one or more termination criteria, wherein the look ahead search is guided by the neural network in accordance with current values of the network parameters; selecting an action to be performed by the agent in response to the observation using the target network output generated by performing the look ahead search; and storing, in an exploration history data store, the target network output in association with the observation for use in updating the current values of the network parameters.
(FR) L'invention concerne des procédés, des systèmes et un appareil, y compris des programmes informatiques codés sur un support de stockage informatique, pour l'apprentissage d'un réseau neuronal de sélection d'action. L'un des procédés consiste à recevoir une observation caractérisant un état actuel de l'environnement ; à déterminer une sortie de réseau cible pour l'observation par réalisation d'une recherche anticipée d'états futurs possibles de l'environnement à partir de l'état actuel jusqu'à ce que l'environnement atteigne un état futur possible qui satisfait un ou plusieurs critères de terminaison, la recherche anticipée étant guidée par le réseau neuronal en fonction des valeurs actuelles des paramètres de réseau ; à sélectionner une action à exécuter par l'agent en réponse à l'observation à l'aide de la sortie de réseau cible générée par la réalisation de la recherche anticipée ; et à stocker, dans une mémoire de données d'historique d'exploration, la sortie de réseau cible en association avec l'observation pour une utilisation dans la mise à jour des valeurs actuelles des paramètres de réseau.
front page image
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DJ, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IR, IS, JO, JP, KE, KG, KH, KN, KP, KR, KW, KZ, LA, LC, LK, LR, LS, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SA, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW
African Regional Intellectual Property Organization (ARIPO) (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, ST, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Organization (AM, AZ, BY, KG, KZ, RU, TJ, TM)
European Patent Office (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, KM, ML, MR, NE, SN, TD, TG)
Publication Language: English (EN)
Filing Language: English (EN)