婉兮清扬

Pegasus / Montage workflow on Amazon Web Services

发表时间：2014-09-16 20:06:25

评论：2

I took some notes while going through Mats Rynge's tutorial on "Pegasus / Montage workflow on Amazon Web Services". The tutorial if officially available at the following URL, but the content is far from complete. I managed to finished this tutorial, and thought that my experience might be valuable for someone else out there in the dark.

https://confluence.pegasus.isi.edu/display/pegasus/2013+-+Montage+workflow+using+Amazon+Web+Services

Step 1. Launch an EC2 instance

In the Oregon region, launch an EC2 instance with AMI ami-f4e47cc4. It is recommend that you use the same security group for all EC2 instance to be launched in the Condor cluster. Also, in the security group, all communication between all EC2 instances using the same security group.

SSH into the instance using the following command:

ssh -i keypair.pem montage@IP

ssh-keygen

cd .ssh

cat id_rsa.pub >> authorized_keys

cd ~

Step 2. Configure Condor

Edit /etc/condor/config.d/20_security.conf，update ALLOW_WRITE and ALLOW_READ to the IP range of your VPC. For example, if the IP range of your VPC is 172.31.0.0/16, then you can set "ALLOW_WRITE = 172.31.*" and "ALLOW_READ = 172.31.*". Then you need to restart Condor with the following command:

sudo service condor restart

Step 3. Create a Montage workflow

mkdir workfow

cd workflow

mDAG 2mass j M17 0.5 0.5 0.0002777778 . file://$PWD file://$PWD/inputs

generate-montage-replica-catalog

Step 4. Pegasus Related

cd ~/etc

cp ../workflow/replica.catalog .

cp ../workflow/dag.xml .

Step 5. Update site.xml with the following content






    

        

            

        

        

            

        

        /home/montage/.ssh/id_rsa

    

    

        

            

        

        condor

        vanilla

        /opt/montage/v3.3

Step 6. Plan the workflow

pegasus-plan --conf pegasus.conf --dax dag.xml

Step 7. Run the workflow

pegasus-run  /home/montage/etc/montage/pegasus/montage/run0001

Step 8. Monitor the workflow

pegasus-status -l /home/montage/etc/montage/pegasus/montage/run0001

condor_status

condor_q

tail montage/pegasus/montage/run0001/jobstate.log

The last command is very nice in that you can see what is currently being run. Please note that you need to replace the path with the actual path given to you by Pegasus.

That's all. After spending weeks searching over the Internet, everything now seems to be simple.

北京法源寺

发表时间：2014-09-01 12:48:50

评论：1

最近6 个月来读到的最好的一本书。

一本好书，首先要有思想，其次要引人思考。

姊妹俩

发表时间：2014-08-29 15:49:42

评论：0

姊妹俩都开始学习乐器啦。

生死疲劳

发表时间：2014-08-25 20:11:02

评论：1

很厚的一本书。在西雅图的时候每天晚上读一点，然后在返回悉尼的飞机上读完了。故事性很强，但是之前已经读过了很多关于过去50年的书，并不觉得与其他的书有什么不同。所谓“魔幻现实主义融合传说、历史与当下”，假借畜生之口装疯卖傻，远远不如阿来的《尘埃落定》。读之前充满期待，读之后有点失望，可能是因为近几年莫言的名头太大了。

总的来说，故事不少，思想不多。

腊玛延那玛哈帕腊达

发表时间：2014-08-18 13:59:26

评论：0

在悉尼飞往洛杉矶的路上一口气看完了这本书，非常喜欢。泰国大王宫里的壁画已经看过了三遍，如今总算可以把部分壁画和故事对上号了。

孙用的这个版本，翻译自罗莫什.杜得的英文节译本。《罗摩衍那》一书，有季羡林先生的全译本，可是一直都找不到。那天在网上查到悉尼大学图书馆东亚部藏有《季羡林全集》，立即兴冲冲地到书库里去找寻。找了半天，才发现正好就缺了《罗摩衍那》这个部分，扫兴而归。

从微观经济学看云计算市场发展

发表时间：2014-08-17 07:01:22

评论：0

我和悉尼大学信息技术学院Young Choon Lee、Albert Y. Zomaya最近完成了一篇题为Price Elasticity of the Enterprise Computing Resource Market的文章。基于2006到2013年的历史市场数据，我们从微观经济学的角度分析了企业计算资源市场的供需关系。原文已经投稿给IEEE Cloud Computing Magazine，正在等待审稿意见中，考虑到文章的内容可能会对国内的从业人员有所帮助，我将原文中的文献综述、参考文献、理论计算等部分删减后翻译为中文版，发表在2014年第7 期的《程序员》杂志上。

文章的结论主要有三点：

服务器销售业务的需求刚性很强。企业根据其业务计划购买服务器，对价格变化并不敏感。IBM采取了正确的涨价策略，但市场的偏好正在从高端服务器往低端服务器迁移，导致了出货数量和营收数额的降低。HP采取了错误的降价策略，虽然出货数量有所增加，但营收数额反倒降低了。DELL采取了正确的涨价策略，又受益于市场偏好的迁移，同时实现了出货数量和营收数额增长。

服务器租赁业务的需求刚性较强。租赁服务器的企业对价格相对敏感，但长期合同的存在有效阻止了用户在市场价格发生波动时流向其他服务提供商。换句话说，企业根据业务规划签订服务器租赁合同，受市场上价格波动影响较小。

公有云服务的需求柔性较强。公有云用户对价格非常敏感，当价格下降时趋向于增加消费。

下载全文：Enterprise_Computing_Resource_Market

记得当时年纪小

发表时间：2014-08-14 21:30:04

评论：0

最喜欢的是林语堂的《八十自叙》系列。很多文章在《从异教徒到基督徒》一书中已经读过了，再次读来还是觉得很喜欢。

梁实秋的一系列文章，总觉得有惶惶如丧家之犬的感觉在，读来很沉重。唯有《槐园梦忆》一篇，令人感慨良深。生活在社会巨变中的人是不幸的，在乱世中得一不离不弃的知己，恐怕是梁先生一生中最大的慰籍了吧。

台静农的文章，不甚喜欢。除了掉书袋，便是悼亡友，过于伤感了。

谢冰莹，感情澎湃，对景物的描写尤为细腻。

徐訏的文章，似乎幽默智慧，但并不是我喜欢的风格。

致谢

发表时间：2014-07-27 19:09:44

评论：0

这次捐款活动共收到善款84笔，总金额为72127.29元。经多方协调，将善款发放给14户困难学生以及8 户贫困家庭。善款发放工作在文昌市翁田镇明月村委会的见证下完成。

此次捐款活动已经结束，请各位朋友不要再给我们捐款。

感谢各位转发和捐款的朋友。台风无情地摧毁了我们的家园，但是你们的爱心给我们的乡亲带来了希望。

向各位朋友求援

发表时间：2014-07-23 19:32:22

评论：1

经过再三考虑，我决定向各位认识或者不认识的朋友求援一下了。

就在前几天，41年来华南最强的台风“威马逊”在我的家乡海南文昌登陆。台风中心经过的翁田镇，农村的房子几乎全部倒塌，家禽牲畜全部死亡、农作物全部毁灭，通电和恢复正常生活生产遥遥无期… …我有一位高中同班同学，她的老家就在翁田镇龙头村，是受灾最严重的一个乡村之一。这位同学的父亲是当地的教师。村里有不少考上了中学或大学的贫困生，遭此灾难后，家里已经拿不出钱给他们在新学期当学费和生活费。还有一些生活艰苦的老人，他们在这次天灾中失去了房子和全部农作物，对生活陷入了绝望… …

为了帮助受灾的乡亲们渡过难关，我的同学们一起商量，打算为乡亲们筹集一些善款。善款的一部分用来支付贫困学生下一个学期的学费和生活费，剩下的部分用来照顾受灾的老人。我和同学们会确保这些善款及时、足额地交到孩子和老人的手中。

如果你愿意为我的乡亲们提供一点帮助，请将捐款汇到如下几个账户。无论金额多少，对于孩子和老人们来说都是莫大的帮助。我们会将善款直接交到孩子和老人手里，并及时公布捐款的详细数额和发放情况。为了便于我们统计帐目，请您汇款后用手机短信通知我们一下。

户名：陈庆晓
帐号：6222022002005303585
开户行：工商银行珠海迎宾支行
手机号码：13928003269

户名：陈美文
帐号：6226621105036956
开户行：中国光大银行海口海甸支行
手机号码：15120798161

支付宝账户：7559902@qq.com
户名：黄小花
手机号码：13876360625

谨代的家乡的孩子和老人谢谢各位好人！