V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
ljk
V2EX  ›  Python

python: install before import module

  •  
  •   ljk · 2016-04-08 12:18:24 +08:00 · 3975 次点击
    这是一个创建于 3186 天前的主题,其中的信息可能已经有所发展或是发生改变。
    try:
    	import pkg
    except Exception as e:
    	subprocess.check_call("easy_install pkg".split())
        
    import pkg
    

    引入 module 之前,先安装,我是像上面这样做的。

    问题是,第一次运行时, pkg 被安装了没错,可是安装完后的那句 import 却抛错了。

    第二次运行时直接 import 成功。

    所以 python 里面是不是有缓存 module 的机制?怎么刷新?

    或者可以赐教一个优雅的 install before import 的方式吗?

    (不想用 pip ,因为有些机器上没有装 pip ,相当于在安装模块之前又要安装 pip ,依赖太多)

    第 1 条附言  ·  2016-04-09 00:36:26 +08:00
    看来 setup.py 是正途
    27 条回复    2016-04-09 16:09:00 +08:00
    ry_wang
        1
    ry_wang  
       2016-04-08 12:29:35 +08:00
    说实话这种依赖库不应该是部署的时候就安装的么,为什么要放到程序逻辑里。
    UnisandK
        2
    UnisandK  
       2016-04-08 12:33:50 +08:00   ❤️ 1
    LS+1
    ljk
        3
    ljk  
    OP
       2016-04-08 12:34:40 +08:00
    正在用 python 弄一个类似于一个命令搞定编译打包的所有东西,所以要尽量帮使用者解决这些依赖啊。
    ljk
        4
    ljk  
    OP
       2016-04-08 12:35:08 +08:00
    congeec
        5
    congeec  
       2016-04-08 12:37:26 +08:00
    @ljk setup.py .................
    nealnote
        6
    nealnote  
       2016-04-08 12:43:24 +08:00   ❤️ 1
    pip install -r

    "
    (不想用 pip ,因为有些机器上没有装 pip ,相当于在安装模块之前又要安装 pip ,依赖太多)
    "

    机器上 python 版本也可能不一致, lz ,应该把 python 也考虑到,如果没有 python ,或者 python 版本不对
    ljk
        7
    ljk  
    OP
       2016-04-08 12:46:58 +08:00
    @nealnote python 是唯一的依赖……

    版本的话,暂时应该没有对特定版本的依赖

    另外 pip install -r 是在命令行敲的吧,我在找一个 programmatically install 的方法。

    如果使用 pip 的话,我会这样做

    import pip
    pip.main(["install", "pkg"])
    oldfish
        8
    oldfish  
       2016-04-08 12:55:00 +08:00 via iPhone
    还能这么玩 666
    davidx
        9
    davidx  
       2016-04-08 13:36:31 +08:00
    之前也遇到过这么一个人, 希望程序能够自己安装自己需要的依赖. 我觉得他们都是中毒了...
    ljk
        10
    ljk  
    OP
       2016-04-08 13:39:54 +08:00
    @davidx pip 确实能做到,已验证

    我就是想知道没有 pip 的 python ,能不能做到……
    julyclyde
        11
    julyclyde  
       2016-04-08 13:52:00 +08:00
    easy_install 也并不是系统自带的
    ljk
        12
    ljk  
    OP
       2016-04-08 13:59:34 +08:00
    @julyclyde 确实这样……不过自带的机率要比 pip 高
    hahastudio
        14
    hahastudio  
       2016-04-08 14:16:48 +08:00   ❤️ 1
    如果你是想打包一个 Python 程序的话,其实你是想做 dependency walker ?
    因为 Python 是可以动态加载 package 的,所以有的时候确实不太好办
    基于静态分析的话, snakefood ? http://furius.ca/snakefood/
    ljk
        15
    ljk  
    OP
       2016-04-08 14:22:15 +08:00
    ljk
        16
    ljk  
    OP
       2016-04-08 14:24:22 +08:00
    @hahastudio 其实我要弄个编译 C++的,想像 chromium 那样弄个 helper script 来编译而已,所以你提的那些貌似没牵扯到……

    Thank you all the same.
    halfcrazy
        17
    halfcrazy  
       2016-04-08 14:27:54 +08:00
    @ljk 这里你肯定可以改啊,关键只是 hook 的时候执行的这一行`out = subprocess.check_output(['sudo', sys.executable, '-m', 'pip', 'install', name])`,你把 pip 换成 easy_install 应该就可以把
    kinghui
        18
    kinghui  
       2016-04-08 14:46:23 +08:00
    还不如直接将所有依赖的第三方库直接下载下来放在项目目录下, 感觉比这种黑科技靠谱多了.
    ljk
        20
    ljk  
    OP
       2016-04-08 14:51:06 +08:00
    @halfcrazy 如果改成 easy_install 的话,跟我原文提到的那个命令就一样了吧……原文提到的那个就是不行的
    julyclyde
        21
    julyclyde  
       2016-04-08 15:08:59 +08:00
    @halfcrazy 这可不能随便 sudo ,二是要密码,一是 sudo 和当前用户不是同一个用户,还不知道装到哪儿去了呢,说不定因为 PATH 不同,连 pip 都不是同一个
    kaneg
        22
    kaneg  
       2016-04-08 16:31:25 +08:00
    同意 @kinghui 的说法,在代码里执行安装不确定的因素太多了:
    * 没权限安装
    * 防火墙阻止
    * 安装的版本不兼容
    等等
    popbones
        23
    popbones  
       2016-04-08 16:40:48 +08:00 via iPhone
    一个命令编译打包部署: Salt/Docker
    Owenjia
        24
    Owenjia  
       2016-04-08 16:58:00 +08:00   ❤️ 1
    如果安装时的包名和 import 的不一样呢?像 beautifulsoup 这种。
    kamushin
        25
    kamushin  
       2016-04-08 17:46:55 +08:00
    如果是纯 Python 包是可以的. 但是带链接库的就不行了.
    ry_wang
        26
    ry_wang  
       2016-04-08 18:59:22 +08:00   ❤️ 2
    programmatically install 的方法,大胸弟你现在的选择是最不 programmatically install 的方法。说实话这么搞真不怕被队友打死么?

    setup.py 或者用 ansible 部署, @ljk
    Septembers
        27
    Septembers  
       2016-04-09 16:09:00 +08:00 via Android
    zipapp feature 是更好的选择

    see https://docs.python.org/3/library/zipapp.html
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1376 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 17:40 · PVG 01:40 · LAX 09:40 · JFK 12:40
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.