b*******r
发帖数: 713 | 1 【 以下文字转载自 Programming 讨论区 】
发信人: bullogger (黯然销魂饭), 信区: Programming
标 题: 菜鸟请问怎么搭这么个系统
发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
我有一个程序，能处理一次实验中采集的数据（一般是几十到几百个数据文件，一共是
上G），生成的结果是1个200M左右的图像文件。组里的人采到了数据，都是在本地处理
，然后把原始文件和结果文件上传到远程FTP server A上。
我现在想在局域网建个linux server B，使得组里的人采到原始数据后，直接上传到远
程FTP A上，然后server B把原始数据从A上下载下来，运行数据处理程序，生成结果文
件，上传到FTP，给上传者发一封信通知，然后把原始文件删掉（因为本地空间有限）。
我以为这个就是写个python脚本（我不会linux脚本，python也是菜鸟）检测程序检测
ftp变化，然后下载处理。但是我需要保证一次实验的所有数据都上传完了再执行，这
样的话脚本怎么知道上传完毕了呢？
还有个办法就是在server B上建个web服务器，用户上传完以后，登陆这个网页，在对
话框里输入ftp路径，点击“处理”，然后B就下载处理这组数据。这样的缺点是自动化
程度不够，用户得等ftp上传结束后手动开始处理，不过也可以接受。请问怎样快速搭
这么个server呢？
多谢 |
y*****n
发帖数: 11251 | |
d*******3
发帖数: 6550 | |
L*****y
发帖数: 4290 | 4 https://www.freelancer.com/
【 以下文字转载自 Programming 讨论区 】
发信人: bullogger (黯然销魂饭), 信区: Programming
标 题: 菜鸟请问怎么搭这么个系统
发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
我有一个程序，能处理一次实验中采集的数据（一般是几十到几百个数据文件，一共是
上G），生成的结果是1个200M左右的图像文件。组里的人采到了数据，都是在本地处理
，然后把原始文件和结果文件上传到远程FTP server A上。
我现在想在局域网建个linux server B，使得组里的人采到原始数据后，直接上传到远
程FTP A上，然后server B把原始数据从A上下载下来，运行数据处理程序，生成结果文
件，上传到FTP，给上传者发一封信通知，然后把原始文件删掉（因为本地空间有限）。
我以为这个就是写个python脚本（我不会linux脚本，python也是菜鸟）检测程序检测
ftp变化，然后下载处理。但是我需要保证一次实验的所有数据都上传完了再执行，这
样的话脚本怎么知道上传完毕了呢？
还有个办法就是在server B上建个web服务器，用户上传完以后，登陆这个网页，在对
话框里输入ftp路径，点击“处理”，然后B就下载处理这组数据。这样的缺点是自动化
程度不够，用户得等ftp上传结束后手动开始处理，不过也可以接受。请问怎样快速搭
这么个server呢？
多谢
【在 b*******r 的大作中提到】
: 【 以下文字转载自 Programming 讨论区 】
: 发信人: bullogger (黯然销魂饭), 信区: Programming
: 标 题: 菜鸟请问怎么搭这么个系统
: 发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
: 我有一个程序，能处理一次实验中采集的数据（一般是几十到几百个数据文件，一共是
: 上G），生成的结果是1个200M左右的图像文件。组里的人采到了数据，都是在本地处理
: ，然后把原始文件和结果文件上传到远程FTP server A上。
: 我现在想在局域网建个linux server B，使得组里的人采到原始数据后，直接上传到远
: 程FTP A上，然后server B把原始数据从A上下载下来，运行数据处理程序，生成结果文
: 件，上传到FTP，给上传者发一封信通知，然后把原始文件删掉（因为本地空间有限）。
|
L*****y
发帖数: 4290 | 5 让他们打包好以后上载.只上载一个压缩文件.
【 以下文字转载自 Programming 讨论区 】
发信人: bullogger (黯然销魂饭), 信区: Programming
标 题: 菜鸟请问怎么搭这么个系统
发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
我有一个程序，能处理一次实验中采集的数据（一般是几十到几百个数据文件，一共是
上G），生成的结果是1个200M左右的图像文件。组里的人采到了数据，都是在本地处理
，然后把原始文件和结果文件上传到远程FTP server A上。
我现在想在局域网建个linux server B，使得组里的人采到原始数据后，直接上传到远
程FTP A上，然后server B把原始数据从A上下载下来，运行数据处理程序，生成结果文
件，上传到FTP，给上传者发一封信通知，然后把原始文件删掉（因为本地空间有限）。
我以为这个就是写个python脚本（我不会linux脚本，python也是菜鸟）检测程序检测
ftp变化，然后下载处理。但是我需要保证一次实验的所有数据都上传完了再执行，这
样的话脚本怎么知道上传完毕了呢？
还有个办法就是在server B上建个web服务器，用户上传完以后，登陆这个网页，在对
话框里输入ftp路径，点击“处理”，然后B就下载处理这组数据。这样的缺点是自动化
程度不够，用户得等ftp上传结束后手动开始处理，不过也可以接受。请问怎样快速搭
这么个server呢？
多谢
【在 b*******r 的大作中提到】
: 【 以下文字转载自 Programming 讨论区 】
: 发信人: bullogger (黯然销魂饭), 信区: Programming
: 标 题: 菜鸟请问怎么搭这么个系统
: 发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
: 我有一个程序，能处理一次实验中采集的数据（一般是几十到几百个数据文件，一共是
: 上G），生成的结果是1个200M左右的图像文件。组里的人采到了数据，都是在本地处理
: ，然后把原始文件和结果文件上传到远程FTP server A上。
: 我现在想在局域网建个linux server B，使得组里的人采到原始数据后，直接上传到远
: 程FTP A上，然后server B把原始数据从A上下载下来，运行数据处理程序，生成结果文
: 件，上传到FTP，给上传者发一封信通知，然后把原始文件删掉（因为本地空间有限）。
|
f*******t
发帖数: 7549 | |
r**i
发帖数: 1222 | 7 写个程序监控FTP server的log。http://www.linuxorz.com/2014/08/vsftpd-enable-logging-and-standard-xferlog-format/
）。
【在 b*******r 的大作中提到】
: 【 以下文字转载自 Programming 讨论区 】
: 发信人: bullogger (黯然销魂饭), 信区: Programming
: 标 题: 菜鸟请问怎么搭这么个系统
: 发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
: 我有一个程序，能处理一次实验中采集的数据（一般是几十到几百个数据文件，一共是
: 上G），生成的结果是1个200M左右的图像文件。组里的人采到了数据，都是在本地处理
: ，然后把原始文件和结果文件上传到远程FTP server A上。
: 我现在想在局域网建个linux server B，使得组里的人采到原始数据后，直接上传到远
: 程FTP A上，然后server B把原始数据从A上下载下来，运行数据处理程序，生成结果文
: 件，上传到FTP，给上传者发一封信通知，然后把原始文件删掉（因为本地空间有限）。
|
