百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

在Ubuntu下安装DeepMD-kit(在Ubuntu下安装llvm和clang)

nanshan 2024-11-13 11:30 54 浏览 0 评论

DeePMD-kit是一个流行的多体(many-body)深度学习势(deep learning potential)框架,需要从头安装tensorflow,比较繁琐,官网的安装教程也有一些暗坑,本文主要讲解如何在Ubuntu下顺利安装DeePMD-kit,主要参考资料[安装deepmd]和[源码安装TensorFlow]

https://blog.csdn.net/xszyqbr/article/details/82961934

https://github.com/deepmodeling/deepmd-kit/blob/master/doc/install-tf.1.12.md

在线安装必须的工具

#automake 工具
sudo apt-get install autoconf automake libtool
#根据是否已经安装make,git和cmake决定是否安装
sudo apt-get install make cmake git

安装JAVA环境

  • 安装OpenJDK 8 JDK sudo apt install openjdk-8-jdk

  • 设置JAVA_HOME变量

    #查看java可执行文件的实际目录,一般指向/etc/alternatives/java
    ls -lrt /usr/bin/java
    #查看/etc/alternatives/java的实际目录
    ls -lrt /etc/alternatives/java
    #一般指向 [/usr/lib/jvm/java-1.8.0-openjdk.x86_64](接下来用的到的)/bin/java
    export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk.x86_64
    export JRE_HOME=/usr/lib/jvm/java-1.8.0-openjdk.x86_64/jre
    export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
    export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$JAVA_HOME:$PATH

安装bazel,必须安装0.15.0及以上版本

  1. 参考安装deepmd教程安装,但版本不一样,如果安装失败,按照方法2安装

  2. 使用预编译好的0.15.0版本的bazel二进制版本(https://blog.csdn.net/darkrabbit/article/details/81262556)

  3. 安装完成后,将bazel位置放在环境变量里,方法2默认会自动把可执行文件放到 /home/usr/bin目录下,如果默认这个目录已经在PATH里无需主动添加。

安装Anaconda3.5,并用conda安装blas

  1. 按照[安装deepmd]安装Anaconda,并加入到环境变量

  2. 使用conda安装blas sudo conda install --channel https://conda.anaconda.org/anaconda blas

  3. 按照[源码安装TensorFlow]教程使用pip安装tensorflow1.12.0

下载tensorflow源码,安装tensorflow的C++接口

  1. 进入想放置tensorflow安装包的目录,比如cd ~

  2. git clone https://github.com/tensorflow/tensorflow tensorflow -b v1.12.0 --depth=1
  3. cd tensorflow

  4. ./configure,有较多的选项,参考博客(https://blog.csdn.net/yhily2008/article/details/79967118)选择配置。

  5. 使用bazel 编译tensorflow,可以控制编译时的所用资源 等待非常久的时间bazel build -c opt --verbose_failures //tensorflow:libtensorflow_cc.so

  6. 设置tensorflow的主安装目录,我装在用户目录~/tensorflow_root

    export tensorflow_root=~/tensorflow_root
    mkdir -p ${tensorflow_root}

在当前目录下下载tensorflow的依赖文件:Protobuf, Eigen, nsync and absl

  • Protobuf

    #设置在${tensorflow_root}目录下新建tmps文件夹用于放置中间文件
    mkdir -p ${tensorflow_root}/tmps
    mkdir -p ${tensorflow_root}/tmps/proto
    sed -i 's;PROTOBUF_URL=.*;PROTOBUF_URL=\"https://mirror.bazel.build/github.com/google/protobuf/archive/v3.6.0.tar.gz\";g' tensorflow/contrib/makefile/download_dependencies.sh
    tensorflow/contrib/makefile/download_dependencies.sh
    cd tensorflow/contrib/makefile/downloads/protobuf/
    ./autogen.sh
    ./configure --prefix=${tensorflow_root}/tmps/proto
    make
    make install
  • Eigen

    mkdir -p ${tensorflow_root}/tmps/eigen
    cd ../eigen
    mkdir build_dir
    cd build_dir
    cmake -DCMAKE_INSTALL_PREFIX=${tensorflow_root}/tmps/eigen/ ../
    make install
  • nsync

    mkdir -p ${tensorflow_root}/tmps/nsync
    cd ../../nsync
    mkdir build_dir
    cd build_dir
    cmake -DCMAKE_INSTALL_PREFIX=${tensorflow_root}/tmps/nsync/ ../
    make
    make install
  • absl

    cd ../../absl
    bazel build
    mkdir -p ${tensorflow_root}/include/
    sudo rsync -avzh --include '*/' --include '*.h' --exclude '*' absl ${tensorflow_root}/include/
    cd ../../../../..
  • 将以上库文件拷贝到tensorflow的安装目录

    mkdir -p ${tensorflow_root}/lib
    cp bazel-bin/tensorflow/libtensorflow_cc.so ${tensorflow_root}/lib/
    cp bazel-bin/tensorflow/libtensorflow_framework.so ${tensorflow_root}/lib/
    cp ${tensorflow_root}/tmps/proto/lib/libprotobuf.a ${tensorflow_root}/lib/
    cp ${tensorflow_root}/tmps/nsync/lib/libnsync.a ${tensorflow_root}/lib/
    #可能是nsync/lib64/libnsync.a
  • 然后拷贝头文件

    mkdir -p ${tensorflow_root}/include/tensorflow
    cp -r bazel-genfiles/* ${tensorflow_root}/include/
    cp -r tensorflow/cc ${tensorflow_root}/include/tensorflow
    cp -r tensorflow/core ${tensorflow_root}/include/tensorflow
    cp -r third_party ${tensorflow_root}/include
    cp -r ${tensorflow_root}/tmps/proto/include/* ${tensorflow_root}/include
    cp -r ${tensorflow_root}/tmps/eigen/include/eigen3/* ${tensorflow_root}/include
    cp -r ${tensorflow_root}/tmps/nsync/include/*h ${tensorflow_root}/include
  • 清理头文件目录下的源文件

    cd ${tensorflow_root}/include
    find . -name "*.cc" -type f -delete
  • 可以删除所有依赖的缓存文件

    rm -fr ${tensorflow_root}/tmps/eigen ${tensorflow_root}/tmps/nsync ${tensorflow_root}/tmps/proto

安装DeePMD-kit

  • 先在${tensorflow_root}的上级目录克隆DeePMD-kit源码

    cd ${tensorflow_root} && cd ../
    git clone https://github.com/deepmodeling/deepmd-kit.git deepmd-kit
  • 通过deepmd_source_dir变量记录源代码的位置

    cd deepmd-kit
    export deepmd_source_dir=`pwd`
    cd ${deepmd_source_dir}/source
    mkdir build
    cd build
  • 设置deepmd-kit的主安装目录,我装在用户目录~/deepmd_root下,执行cmake,

    export deepmd_root=~/deepmd_root
    mkdir -p ${deepmd_root}
    #如果用gcc>5.0 去掉选项-DTF_GOOGLE_BIN=true,如果运行时出现deepmd-kit/lib/deepmd/libop_abi.so: undefined symbol:请打开选项-DTF_GOOGLE_BIN=true
    cmake -DTF_GOOGLE_BIN=true -DTENSORFLOW_ROOT=${tensorflow_root} \
    -DCMAKE_INSTALL_PREFIX=${deepmd_root} ..
  • 如果cmake执行成功,make以及make install

    make
    make install
  • 如果一切顺利地话,你将在$deepmd_root/bin目录下找到以下可执行文件

    $ ls ${deepmd_root}/bin
    dp_frz dp_ipi dp_test dp_train
    #可以加入系统PATH
    echo 'PATH='${deepmd_root}'/bin:$PATH' >> ~/.bashrc
    source ~/.bashrc

Install LAMMPS’s DeePMD-kit module

参考官方安装教程,首先得学会lammps的安装。

Build DeePMD-kit with GPU support

参考官方安装教程。

相关推荐

如何为MySQL服务器和客户机启用SSL?

用户想要与MySQL服务器建立一条安全连接时,常常依赖VPN隧道或SSH隧道。不过,获得MySQL连接的另一个办法是,启用MySQL服务器上的SSL封装器(SSLwrapper)。这每一种方法各有其...

Mysql5.7 出现大量 unauthenticated user

线上环境mysql5.7突然出现大量unauthenticateduser,进mysql,showprocesslist;解决办法有:在/etc/hosts中添加客户端ip,如192.16...

MySQL 在 Windows 系统下的安装(mysql安装教程windows)

更多技术文章MySQL在Windows系统下的安装1.下载mysql和Framework链接链接:百度网盘请输入提取码提取码:6w3p双击mysql-installer-communit...

MySql5.7.21.zip绿色版安装(mysql数据库绿色版安装)

1、去网上下载满足系统要求的版本(mysql-5.7.21-winx64.zip)2、直接解压3、mysql的初始化(1)以管理员身份运行cmd,在mysql中的bin目录下shift+右键-在...

MySQL(8.0)中文全文检索 (亲测有效)

在一堆文字中找到含有关键字的应用。当然也可以用以下语句实现:SELECT*FROM<表名>WHERE<字段名>like‘%ABC%’但是它的效率太低,是全盘扫描。...

新手教程,Linux系统下MySQL的安装

看了两三个教程。终于在哔哩哔哩找到一个简单高效的教程,成功安装,up主名叫bili逍遥bili,感兴趣可以去看看。下面这个是我总结的安装方法环境:CentOS764位1.下载安装包,个人觉得在...

麒麟服务器操作系统安装 MySQL 8 实战指南

原文连接:「链接」Hello,大家好啊,今天给大家带来一篇麒麟服务器操作系统上安装MySQL8的文章,欢迎大家分享点赞,点个在看和关注吧!MySQL作为主流开源数据库之一,被广泛应用于各种业务...

用Python玩转MySQL的全攻略,从环境搭建到项目实战全解析

这是一篇关于“MySQL数据库入门实战-Python版”的教程,结合了案例实战分析,帮助初学者快速掌握如何使用Python操作MySQL数据库。一、环境准备1.安装Python访问Pytho...

安装MySQL(中标麒麟 安装mysql)

安装MySQL注意:一定要用root用户操作如下步骤;先卸载MySQL再安装1.安装包准备(1)查看MySQL是否安装rpm-qa|grepmysql(2)如果安装了MySQL,就先卸载rpm-...

Mysql最全笔记,快速入门,干货满满,爆肝

目录一、MySQL的重要性二、MySQL介绍三、软件的服务架构四、MySQL的安装五、SQL语句六、数据库相关(DDL)七、表相关八、DML相关(表中数据)九、DQL(重点)十、数据完...

MAC电脑安装MySQL操作步骤(mac安装mysqldb)

1、在官网下载MySQL:https://dev.mysql.com/downloads/mysql/根据自己的macOS版本,选择适配的MySQL版本根据自己需求选择相应的安装包,我这里选择macO...

mysql主从(mysql主从切换)

1、本章面试题什么是mysql主从,主从有什么好处什么是读写分离,有什么好处,使用mycat如何实现2、知识点2.1、课程回顾dubboORM->MVC->RPC->SOApro...

【linux学习】以MySQL为例,带你了解数据库

做运维的小伙伴在日常工作中难免需要接触到数据库,不管是MySQL,mariadb,达梦还是瀚高等其实命令都差不多,下面我就以MySQL为例带大家一起来了解下数据库。有兴趣的小伙伴不妨评论区一起交流下...

玩玩WordPress - 环境简介(0)(玩玩网络科技有限公司)

简介提到开源博客系统,一般都会直接想到WordPress!WordPress是使用PHP开发的,数据库使用的是MySQL,一般会在Linux上运行,Nginx作为前端。这时候就需要有一套LNMP(Li...

服务器常用端口都有哪些?(服务器端使用的端口号范围)

下面为大家介绍一下,服务器常用的一些默认端口,以及他们的作用:  21:FTP服务所开放的端口,用于上传、下载文件。  22:SSH端口,用于通过命令行模式远程连接Linux服务器或vps。  23:...

取消回复欢迎 发表评论: