只萌萝莉 只萌萝莉
没有梦想可不行...
关注数: 91 粉丝数: 187 发帖数: 21,904 关注贴吧数: 96
cvpr2019相关paper Cao_SeerNet_Predicting_Convolutional_Neural_Network_Feature-Map_Sparsity_Through_Low-Bit_Quantization_CVPR_2019_paper.pdf ChamNet-Towards-Efficient-Network-Design-through-Platform-Aware-Model-Adaptation.pdf Chen_All_You_Need_Is_a_Few_Shifts_Designing_Efficient_Convolutional_CVPR_2019_paper.pdf Chen_You_Look_Twice_GaterNet_for_Dynamic_Filter_Selection_in_CNNs_CVPR_2019_paper.pdf cvpr2019.md Gao_Dynamic_Scene_Deblurring_With_Parameter_Selective_Sharing_and_Nested_Skip_CVPR_2019_paper.pdf Georgiadis_Accelerating_Convolutional_Neural_Networks_via_Activation_Map_Compression_CVPR_2019_paper.pdf He_Filter_Pruning_via_Geometric_Median_for_Deep_Convolutional_Neural_Networks_CVPR_2019_paper.pdf Jung_Learning_to_Quantize_Deep_Networks_by_Optimizing_Quantization_Intervals_With_CVPR_2019_paper.pdf Kim_Efficient_Neural_Network_Compression_CVPR_2019_paper.pdf Kossaifi_T-Net_Parametrizing_Fully_Convolutional_Nets_With_a_Single_High-Order_Tensor_CVPR_2019_paper.pdf Lemaire_Structured_Pruning_of_Neural_Networks_With_Budget-Aware_Regularization_CVPR_2019_paper.pdf Lin_Towards_Optimal_Structured_CNN_Pruning_via_Generative_Adversarial_Learning_CVPR_2019_paper.pdf Liu_Knowledge_Distillation_via_Instance_Relationship_Graph_CVPR_2019_paper.pdf Liu_Structured_Knowledge_Distillation_for_Semantic_Segmentation_CVPR_2019_paper.pdf Li_Compressing_Convolutional_Neural_Networks_via_Factorized_Convolutional_Filters_CVPR_2019_paper.pdf Li_Exploiting_Kernel_Sparsity_and_Entropy_for_Interpretable_CNN_Compression_CVPR_2019_paper.pdf Li_Partial_Order_Pruning_For_Best_SpeedAccuracy_Trade-Off_in_Neural_Architecture_CVPR_2019_paper.pdf Li_Selective_Kernel_Networks_CVPR_2019_paper.pdf Mehta_ESPNetv2_A_Light-Weight_Power_Efficient_and_General_Purpose_Convolutional_Neural_CVPR_2019_paper.pdf Mehta_On_Implicit_Filter_Level_Sparsity_in_Convolutional_Neural_Networks_CVPR_2019_paper.pdf Minnehan_Cascaded_Projection_End-To-End_Network_Compression_and_Acceleration_CVPR_2019_paper.pdf Molchanov_Importance_Estimation_for_Neural_Network_Pruning_CVPR_2019_paper.pdf Prakash_RePr_Improved_Training_of_Convolutional_Filters_CVPR_2019_paper.pdf Wang_Fully_Learnable_Group_Convolution_for_Acceleration_of_Deep_Neural_Networks_CVPR_2019_paper.pdf Wang_Kervolutional_Neural_Networks_CVPR_2019_paper.pdf Wu_FBNet_Hardware-Aware_Efficient_ConvNet_Design_via_Differentiable_Neural_Architecture_Search_CVPR_2019_paper.pdf Yang_ECC_Platform-Independent_Energy-Constrained_Deep_Neural_Network_Compression_via_a_Bilinear_CVPR_2019_paper.pdf Yang_Quantization_Networks_CVPR_2019_paper.pdf Yuan_Enhanced_Bayesian_Compression_via_Deep_Reinforcement_Learning_CVPR_2019_paper.pdf Yu_Learning_Metrics_From_Teachers_Compact_Networks_for_Image_Embedding_CVPR_2019_paper.pdf Zhao_Variational_Convolutional_Neural_Network_Pruning_CVPR_2019_paper.pdf
2 ネットワーク圧縮アルゴリズム比較実験: 1. 使うデータセット、cifar10 2. 使うbaseline-network : **各アルゴリズムのsourcecodeで使用されたnetwork:** |アルゴリズム|convnet|lenent|mobilenet|resnet|vgg|densenet|googlenet|alexnet |他のnetwork実装可能||-----|---|----|----|---|------|----|----|---|----||*batchnorm-pruning: | ○| ○ | ○|○|○|×| × | × | 可能 ||CEGS | ○ | × | × | × | × | × | × | × |datasetも変更||graphtheory| × | × |× | ○ | ○ | ○ |× | ○ | 変更可能 ||* N2N | × | ○ | × | ○ | ○ | ○ | ○ | alexnet  |教師dataがあれば ||slimming | × | × | × | ○ | ○ | ○ | × | × | 手前かかる || sact | × | × | × | ○ | × | × | × | × | resnet系のみに適用可能 ||*TRP | × | × | × |○ | ○ | ○ | × | ○ | 変更可能,他の部分を変更する必要がある | * 1. batchnorm-pruning のsourcecodeは自分で実装したもの(一部分) * 2. N2Nは論文通りの結果ではなかった* 3. network以外他の部分(cifar-TRPのmodelを定義する部分)も変更する必要がある 3. * resnetとvgg系で評価するのは妥当 * CEGS及びPCASは改めて実装する必要がある* まず手前があまりかからない実験できるアルゴリズムから実験をする, * 実験順番は...?   TRP -> resnet20 ()  **sact -> (rewrite with cifar_model can revise model ) resnet20:diffcult to revise** sliming -> Resnet20( set deafult depth as 20 in resprune) N2N , can change network to resnet20 while need to change other part(teacher's data use make_teacher_data.py file) graph theory : only have resnet model for imagenet dataset , but can be revised              batchnorm-pruning :problems with sourcecode 順番的に最後でやる            while tensorflow 's sourcecode is base on resnet20 , can use virtualenv to set python2 environmentCEGS : dataset and model 順番的に暇の時間でやる PCAS: 0から実装する必要がある* VGG :* やるかどうかまだ決めていない 
解决策略 1. python  数据类型转换:列表和字典的基础知识 :画图:文件读写:切片:静态方法:命令行添加参数: 2. numpy切片:高维度张量操作: 维度变换 改变维度大小张量的矩阵式编程“: 避免循环的使用, broadcast 数据类型变换: 随机生成: 分布: 3. c++类的定义: 模板的定义: 其他一些概念(枚举,正则... )指针,内存管理相关 容器相关 输入输出相关 4. pytorch 神经网络模块(各个属性,各个方法) 学习流程控制模块: hook 、 数据输入模块 数据类型转换相关 梯度更新有关,分离出部分不更新的参数之类 多gpu时的并列计算....: (暂时不考虑) pytorch相关的可视化操作 基础学习设置,loss 优化器, pytorch的张量的特点5. tensorflow数据输入,输出,转换(流程控制,迭代) TensorFlow搭图, 如何做到和pytorch一样控制更新梯度还是不更新参数学习流程控制(非常重要,因为TensorFlow是通过迭代器来进行一次一次更新的) TensorFlow的变量 variable 有什么特点 : tensorboard可视化 6. 離散数学了解离散数学里有哪些概念,有哪些理论 7. 信号処理 基础部分,傅里叶变化,小波变化的含义大概了解滤波之类的有个概念 8. 画像処理一部分和信号处理共通的就无视了 偏重图像部分 : 成像原理 离散傅里叶变化、快速傅里叶变换,二维傅里叶变换 边缘检测理论 图片分割理论 图像梯度计算理论 滤波、噪音去除理论 形态学图像处理 图像编码理论(压缩理论) 9. 統計/確率論 了解这一理论里大致有哪些内容 和机器学习相关的重点了解: 贝叶斯分类器 10. DNN関係の理論这里就很杂了,太多了 基础网络有关 : cnn rnn 生成对抗网络 数学有关: 支持向量机 贝叶斯分类器 机器学习算法: 强化学习 无监督学习 弱监督学习 自编码自解码物体检测算法: 图片语义分割算法: 神经网络加速算法: 调参经验: 11. hardware 编译原理: 多核并列计算原理: 分布式计算 : 12. linux os文件管理 存储空间管理 文件编译功能 git的使用 13. make /cmake software 組み立て 文件链接, 编译, 主要是gcc cmake make gnu等东西的差别..... 14. opencv经典的一些图像处理算法的实现有个了解即可滤波边缘检测噪音去除梯度计算图像金字塔形态学操作 15. sever関係/ aws google cloud など 暂时不会用 有时间可以了解一下aws 16. 数据构造和基础算法排序 二分木 等算法基础... 那一本书差不多够了 链表 堆 栈 队列 等常见的数据结构 17. 机器视觉相关算法 slam,光流, 光流和slam有关的理论 稍作了解就可
【老年魔卡粉】一些微不足道的个人收藏 RT, 老年魔卡粉一名。从很认真的喜欢上这部作品已经过去12年了吧。 虽然已经不水贴吧许久,不过刚好因为前一阵子b站萌战的契机觉得还是应该多认识些魔卡的厨子- -。 于是放一些个人的魔卡相关的周边...东西不多,其实也没什么东西 - - 另外时间跨度比较久远。。。首先是BD BOX 和DVD BOX BD是第三版的 DVD是最新版的(不得不吐槽魔卡已经出到第四版的 BD BOX了 相同的内容换一下封面 可能画质稍微有些变化)可能都可以申请吉尼斯记录了、、然后... 这个应该前年买的...之前clear card 开始连载的那段时间发售的一个box。里面是明信片和 一只小可。 介于桌子空间有限就补一张一张放明信片了。。。这个....之前和新漫画一起卖的一个礼盒... 结果里面的东西..意外的挺少的。 主要刚开始不知为什么我总以为这里面会是一套做曲奇的模子...然后是剧场版相关了。 lz很幸运赶上了今年和去年两部剧场版的重新上映,于是补了当年的电影票 顺便在电影院买了点相关周边...这套发卡其实有库洛牌和小樱牌两套,然而小樱牌那套因为曾经的一时兴起送给别人了...香港篇的一套明信片接下来,突然回到12年前- -。 应该说是真的认真喜欢上这部作品的开端吧...当时无意在书店 看到了接力出版社代理的这套漫画... 尤其是12卷真的是入坑神作.... 可惜这套漫画我也没有买全以及新漫画,新出的两卷都还没时间买....clear card 的挂卷日本这边711联动的文件夹接下来这个... 是超级古董了 2000年剧场版上映的时候电影院里卖的入场手册。这个是之前无意 在日本亚马逊买到的然后手办。。其实lz还真的没有几个- -。 中学的时候买过一些很小的那种不过也都没有带在身边了。 所以就只有这一个了。 大概就这么多了。今年10月到明年1月期间东京会有魔卡的美术展。 那个期间有机会旅游的同学一定不要忘记路过一下 _(:з」∠)_ 以及暑假东急电铁和魔卡在搞联动盖章活动, lz后天大概会去看看又没啥东西 - - (虽然可能盖章的本子已经被领完了 ) 如果能拍到东西到时候再跟新一波好了
1 下一页