1云南大学软件学院期末课程报告Final Course ReportSchool of Software, Yunnan University个人成绩序号 学号 姓名 成绩12学期： 2016-2017 学年上学期 课程名称: 网络开放源码体系 任课教师: 薛岗 实践题目: 小 组 长: 联系电话: 电子邮件: 完成提交时间：2016 年 月 日2云南大学软件学院 2016-2017 学年上学期网络开放源码体系期末大作业成绩考核表年级： 专业： 学号： 姓名： 本人所做工作： 指标内容 分值 指标内涵及评估标准 得分技术路线的可行程度 15合理可行，具体且有创新 合理可行，具体 基本合理可行不够合理或不够具体程序或系统设计思路 20程序或系统思路非常清晰、运行正确程序或系统思路基本清晰、运行正确程序或系统思路清晰、环境配置错误无法运行程序或系统思路不清晰，程序无法运行达到预期目标的程度 15 完全达到 基本达到 无法预见 未能达到项目完成的技术水平（个人） 10难度很大，超出一般本科生要求水平难度较大，达到本科毕业论文水平难度一般，达到普通课程要求水平难度小，很容易实现小组成员的工作量（每个人分别打分）5高出平均要求工作量的 15% 以上高出平均要求工作量达到平均要求工作量低于平均要求的工作量团队合作情况 5 很强的团队合作精神 合作情况良好 合作情况一般 合作不好，各自为政5 报告非常完整 报告比较完整 完整程度一般 报告不完整5 逻辑结构清晰 逻辑组织较好 逻辑组织一般 逻辑不清5 内容非常丰富 内容较丰富 内容一般 内容欠缺5 文字表达非常好 文字表达较好 文字表达一般 文字表达差，意思不明了5 图表制作非常专业化 图件制作良好 图件制作一般 图件制作效果差报告撰写质量（总分：30 分）5 整体效果很好 整体效果良好 整体效果一般 整体效果差综合得分（总分：100分）评语：任课老师签名3云南大学软件学院 2016-2017 学年上学期网络开放源码体系期末大作业成绩考核表年级： 专业： 学号： 姓名： 本人所做工作： 指标内容 分值 指标内涵及评估标准 得分技术路线的可行程度 15合理可行，具体且有创新 合理可行，具体 基本合理可行不够合理或不够具体程序或系统设计思路 20程序或系统思路非常清晰、运行正确程序或系统思路基本清晰、运行正确程序或系统思路清晰、环境配置错误无法运行程序或系统思路不清晰，程序无法运行达到预期目标的程度 15 完全达到 基本达到 无法预见 未能达到项目完成的技术水平（个人） 10难度很大，超出一般本科生要求水平难度较大，达到本科毕业论文水平难度一般，达到普通课程要求水平难度小，很容易实现小组成员的工作量（每个人分别打分）5高出平均要求工作量的 15% 以上高出平均要求工作量达到平均要求工作量低于平均要求的工作量团队合作情况 5 很强的团队合作精神 合作情况良好 合作情况一般 合作不好，各自为政5 报告非常完整 报告比较完整 完整程度一般 报告不完整5 逻辑结构清晰 逻辑组织较好 逻辑组织一般 逻辑不清5 内容非常丰富 内容较丰富 内容一般 内容欠缺5 文字表达非常好 文字表达较好 文字表达一般 文字表达差，意思不明了5 图表制作非常专业化 图件制作良好 图件制作一般 图件制作效果差报告撰写质量（总分：30 分）5 整体效果很好 整体效果良好 整体效果一般 整体效果差综合得分（总分：100分）评语：任课老师签名4基于 mongodb 和网络爬虫的数据管理项目总结报告目录1 引言 .41.1 编写目的 .41.2 背景 .51.3 定义 .71.4 参考资料 .72 实际开发结果 .82.1 产品 .82.2 主要功能和性能 .102.3 基本流程 .122.4 进度 .133 开发工作评价 .133.1 对技术方法的评价 .133.2 出错原因的分析 .144 经验与教训 .155 实际成果展示 .161 引言1.1 编写目的1. 为了明确项目的开发目的和开发过程，具体规划项目开发的流程，以及预测分析项目会遇到的问题以及我们应对的措施2. 阐述项目的开发意义，实际作用和具体解决的问题3. 软件总体要求，作为用户和软件开发人员之间了解的基础54. 功能、性能、接口和可靠性的要求，作为软件人员进行设计和编码的基础5. 验收标准，作为用户确认测试的依据1.2 背景1.项目名称：基于 mongodb 和网络爬虫的数据管理项目2. 背景分析：针对现实中出现的农产品经营的实际问题，立足生活实际需要，我们结合大数据平台以及所学。运用大数据分析，通过对农产品在各地的销售情况价格对比，生产一份可靠的能见的对商家降低成本有利的，对农民有利的一份双赢的从进货到销售的推荐方案。例如：2016 年 8 月在新疆出现的西瓜滞销事件在北上广深等一线城市，西瓜普遍卖到两三元一斤，在成都，重庆，昆明等西南地区城市，西瓜普遍卖到 1.5 至 2 元一斤。是新疆产地收购价格的二三十倍，甚至四五十倍。问题到底出在哪里?新疆西瓜滞销后是不是只有含泪拍烂在地里，西瓜销路是否还有其它出路?西瓜种植成本只是市民吃到口的零头。一个西瓜从田间地头到餐桌，至少要倒三四到手。市民吃到的西瓜种植成本只是零头，运输物流成本和店面租金等才是大头。6每年夏季，刘进贵都要将新疆西瓜贩卖到北上广深等地批发销售，就拿广州来说吧，从新疆产地运输过去，运费摊到西瓜里 基本摊到到一块钱到一块一毛钱了。而这些西瓜要进入当地农产品批发市场批发，还要缴纳进场费，一车西瓜一般要批发两三天有时三四天才能卖完，一般是两位合伙人看守销售西瓜，两人在当地吃住等费用再摊进西瓜里又摊进去又摊进去四五角钱。此外，西瓜价格构成中，还要摊进装卸费，西瓜运输损耗和销售损耗等。就算新疆这边产地西瓜收购价最低只有 1 毛钱，但拉到广州最低要批发到 1.8 元一公斤才能保本。刘进强计算。而这些西瓜经一级批发市场批发出去后，部分还要转手到二级批发市场，经过两次倒手后，西瓜批发价里每公斤又摊进去三四角钱成本，而最后的终端零售店将西瓜拉到店里销售还要摊进去一两角钱成本，以此计算到最终端零售店各项成本费摊进西瓜里每公斤就达到 2.4 元。根据上面的案例分析，如果能了解更多的水果销售信息，就能够更好的销售出商品，避免亏本的情况出现。3. 项目目的：在网络上有很多商品的描述信息数据，由于大部分数据是个人自己上传的，数据的格式大不相同，导致数据整齐7性，可读性和可用性大大降低；本次项目中爬虫把网络上格式不一的，分散的数据收集起来，进行简单的数据处理之后把数据存入