原文:神經網絡——一些簡單的技術細節

一. 前言 最近開始搞自動駕駛感知部分,將之前的總結的資料和筆記調出來看看,順便總結一下,留下記錄。 二. 神經網絡介紹 這里我們采用優達學城 上提供的例子,如下圖所示。 圖 圖 圖 上圖是根據grades和test的成績來判斷是否被大學錄取,綠色的圓表示錄取,紅色的圓表示拒絕錄取。 從上圖 可以看出,如果采用線性的方法區分紅色和綠色,采用一條直線直線的效果不好 圖 ,所以需要用兩條直線區分 圖 ...

2019-10-06 11:11 0 317 推薦指數:

查看詳情

神經網絡建模的一些感悟;

2016/10/6 1: 用自定義的weighted loss來看, 10000個batch仍然沒有收斂; 2:仍然使用sigmoid cross entropy loss, 7 ...

Fri Mar 17 04:33:00 CST 2017 0 1719
關於神經網絡訓練的一些建議筆記

關於網絡訓練時的參考建議: 1.train loss不斷下降,test loss不斷下降,網絡正在學習 2.train loss不斷下降,test loss趨於不變,網絡過擬合,需要增大數據;減小網絡規模dropout;權重衰減或正則化L2等 3.train loss趨於不變,test ...

Mon Mar 25 06:05:00 CST 2019 0 522
神經網絡模型之AlexNet的一些總結

說明: 這個屬於個人的一些理解,有錯誤的地方,還希望給予教育哈~ 此處以caffe官方提供的AlexNet為例. 目錄: 1.背景 2.框架介紹 3.步驟詳細說明 5.參考文獻 背景: AlexNet是在2012年被發表的一個金典之作,並在當年取得了ImageNet最好 ...

Fri Nov 04 18:27:00 CST 2016 29 59378
關於rnn神經網絡的loss函數的一些思考

--- 做了這么長時間的基於深度學習的NLP,愈發可以感受到bayesian的意思,語言模型里面一切皆是分布,問題答案都是分布,一個問題模擬出來的是一個答案的分布; 我覺得我做的 ...

Fri Mar 17 04:36:00 CST 2017 0 5216
神經網絡之循環神經網絡細節分析

以下內容是個人參考網上的學習資料以及自己的理解進行總結的 1、循環神經網絡的介紹具體看 https://www.cnblogs.com/pinard/p/6509630.html 深度神經網絡無法利用數據中時間序列信息,循環神經網絡應勢而生。循環神經網絡的主要用途是處理和預測序列數據,它最 ...

Mon Jun 10 06:54:00 CST 2019 0 902
Hbase 技術細節筆記(上)

歡迎大家前往騰訊雲技術社區,獲取更多騰訊海量技術實踐干貨哦~ 作者:張秀雲 前言 最近在跟進Hbase的相關工作,由於之前對Hbase並不怎么了解,因此系統地學習了下Hbase,為了加深對Hbase的理解,對相關知識點做了筆記,並在組內進行了Hbase相關技術的分享 ...

Sun Oct 01 00:44:00 CST 2017 3 7932
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM