«lstm» 태그된 질문

나는 LSTM에 대한 나의 이해를 조정하려고 노력하고 있으며 Keras에서 구현 한 Christopher Olah 의이 게시물 에서 지적했습니다 . Keras 튜토리얼을 위해 Jason Brownlee이 작성한 블로그를 따르고 있습니다. 내가 주로 혼동하는 것은 데이터 계열을 [samples, time steps, features]및 스테이트 풀 LSTM 아래에 붙여 넣은 코드를 참조하여 위의 두 가지 질문에 집중하십시오. …

311 python  deep-learning  keras  lstm 

예제 코드를 고려하십시오 . 그라디언트가 폭발 할 가능성이있는 RNN에서이 네트워크에 그라디언트 클리핑을 적용하는 방법을 알고 싶습니다. tf.clip_by_value(t, clip_value_min, clip_value_max, name=None) 이것은 사용할 수있는 예이지만 어디에서 소개해야합니까? RNN의 정의 lstm_cell = rnn_cell.BasicLSTMCell(n_hidden, forget_bias=1.0) # Split data because rnn cell needs a list of inputs for the RNN inner loop _X = …

96 python  machine-learning  tensorflow  deep-learning  lstm 

github (link) 에서 LSTM 언어 모델의이 예제를 살펴 보았습니다 . 일반적으로하는 일은 나에게 매우 분명합니다. 그러나 나는 여전히 contiguous()코드에서 여러 번 발생 하는 호출 이 무엇을하는지 이해하는 데 어려움을 겪고 있습니다. 예를 들어 74/75 행의 코드 입력 및 LSTM의 대상 시퀀스가 ​​생성됩니다. 데이터 (에 저장 됨 ids)는 2 차원이며 첫 …

90 neural-network  deep-learning  lstm  pytorch  contiguous