发表于 | 分类于
| 字数统计 1686 | 阅读时长 8

tf.data API 简介

借助这个 API 可以较为快速的入门数据导入的部分。自定义数据输入可以说是跑任何模型必须要会的部分。学习这部分 API 是入门 Tensorflow跳不过的部分。本部分和之前的 Tensorflow 部分一样，主要是筛选自官方教程，意在跳出自己认为核心的入门内容，抛去复杂的细节，以求快速入门。

阅读全文 »

发表于 | 分类于
| 字数统计 945 | 阅读时长 4

Estimator 作用简介

Estimator 使用来简化机器学习训练、评估、预测的一个高阶 TensorFlow API。我们可以使用预创建的 Estimator，也可以自己编写自定义的 Estimator，但是所有的 Estimator 都是基于 tf.estimator.Estimator 类的类。

阅读全文 »

发表于 | 分类于
| 字数统计 319 | 阅读时长 1

简介

IPdb 是一个 python 用的 “gdb” 超级好用，如果你的编辑环境中懒得装 IDE，或者工作环境没有图形化界面的话，这个工具简直就是为你量身定制的。我已经把这个工具融入到了自己的 VIM 脚本中，成为日常码农生活的一份子。

阅读全文 »

发表于 | 分类于
| 字数统计 308 | 阅读时长 1

问题分析

在 Keras 中配置多 GPU 并行计算的时候，报错 libnccl.so.2 not found。简单的来说就是 Tensorflow 多 GPU 运行的话使用了一个 NCCL 2.x 的库，但是不是默认安装的，同时又由于NCCL 2.x是动态加载的，因此不会影响不调用NCCL原语的程序，也就是说直到你第一次尝试多 GPU 为止都不会发现这个问题。

阅读全文 »

发表于 | 分类于
| 字数统计 275 | 阅读时长 1

服务球端安装 ssh

  1. 测试服务器是否安装了 ssh 
    1
    2
    3
    4
    5
     ps -e | grep ssh
 # output

 # 存在 ssh-agent 说明有 ssh 客户端
 # 存在 sshd 说明有 ssh 服务器端
  2. 安装 ssh 
    1
    2
    3
    4
    5
     # ssh-client
 sudo apt-get install openssh-client

 # ssh-server
 sudo apt-get install openssh-server
  3. 更换 ssh 服务默认端口
    • 使用 vim 打开配置文件 /etc/ssh/sshd_config，搜索 port 更改端口号即可。 
      1
        sudo /etc/init.d/ssh restart # 使配置生效
阅读全文 »

发表于 | 分类于
| 字数统计 595 | 阅读时长 2

pip 的使用

  1. 安装第三方库 
    1
    2
    3
     pip install packageName ``` 2. 卸载
 ```python
 pip uninstall packageName
  2. 检测最新包 & 升级包 
    1
    2
    3
    4
     pip list --outdated packageName
 pip install --upgrade packageName
 pip3 list --outdated | grep -e '^[a-z]' | cut -d ' ' -f 1 | xargs -n1 pip3 install -U
 # 小 trick 一键升级所有的包
  3. 显示所有已经安装的包名 
    1
    2
     pip freeze
 pip list
阅读全文 »

发表于 | 分类于
| 字数统计 1603 | 阅读时长 8

简介

这节课主要的内容其实就是简单的介绍了 TensorFlow 的一些基本理念，和一些简单的用法，并用半节课的时间实现了之前我们做过的实验 Skipgram。

阅读全文 »