diff --git a/BookDouban250.csv b/BookDouban250.csv index 15130a7..58dff19 100644 --- a/BookDouban250.csv +++ b/BookDouban250.csv @@ -1,301 +1,76 @@ 书名,豆瓣链接,作者,译者,出版社,出版日期,价格,评分,评分人数,一句话评价 红楼梦,https://book.douban.com/subject/1007305/,[清] 曹雪芹 著 ,, 人民文学出版社 , 1996-12 , 59.70元,9.6,"( - 424747人评价 + 424772人评价 )",都云作者痴，谁解其中味？ 活着,https://book.douban.com/subject/4913064/,余华 ,, 作家出版社 , 2012-8 , 20.00元,9.4,"( - 835235人评价 + 835290人评价 )",生的苦难与伟大 1984,https://book.douban.com/subject/4820710/,[英] 乔治·奥威尔 , 刘绍铭 , 北京十月文艺出版社 , 2010-4-1 , 28.00,9.4,"( - 285065人评价 + 285090人评价 )",栗树荫下，我出卖你，你出卖我 哈利·波特,https://book.douban.com/subject/24531956/,J.K.罗琳 (J.K.Rowling) , 苏农 , 人民文学出版社 , 2008-12-1 , 498.00元,9.7,"( - 107700人评价 + 107716人评价 )",从9¾站台开始的旅程 三体全集,https://book.douban.com/subject/6518605/,刘慈欣 ,, 重庆出版社 , 2012-1 , 168.00元,9.5,"( - 188163人评价 + 188181人评价 )",地球往事三部曲 百年孤独,https://book.douban.com/subject/6082808/,[哥伦比亚] 加西亚·马尔克斯 , 范晔 , 南海出版公司 , 2011-6 , 39.50元,9.3,"( - 426471人评价 + 426504人评价 )",魔幻现实主义文学代表作 飘,https://book.douban.com/subject/1068920/,[美国] 玛格丽特·米切尔 , 李美华 , 译林出版社 , 2000-9 , 40.00元,9.3,"( - 212787人评价 + 212799人评价 )",革命时期的爱情，随风而逝 动物农场,https://book.douban.com/subject/2035179/,[英] 乔治·奥威尔 , 荣如德 , 上海译文出版社 , 2007-3 , 10.00元,9.3,"( - 160375人评价 + 160394人评价 )",太阳底下并无新事 房思琪的初恋乐园,https://book.douban.com/subject/27614904/,林奕含 ,, 北京联合出版公司 , 2018-2 , 45.00元,9.2,"( - 380457人评价 + 380487人评价 )",向死而生的文学绝唱 三国演义（全二册）,https://book.douban.com/subject/1019568/,[明] 罗贯中 ,, 人民文学出版社 , 1998-05 , 39.50元,9.3,"( - 168777人评价 + 168784人评价 )",是非成败转头空 福尔摩斯探案全集（上中下）,https://book.douban.com/subject/1040211/,[英] 阿·柯南道尔 , 丁钟华 等 , 群众出版社 , 1981-8 , 53.00元/68.00元,9.3,"( - 133793人评价 + 133801人评价 )",名侦探的代名词 白夜行,https://book.douban.com/subject/10554308/,[日] 东野圭吾 , 刘姿君 , 南海出版公司 , 2013-1-1 , 39.50元,9.2,"( - 476221人评价 + 476254人评价 )",一宗离奇命案牵出跨度近20年步步惊心的故事 小王子,https://book.douban.com/subject/1084336/,[法] 圣埃克苏佩里 , 马振骋 , 人民文学出版社 , 2003-8 , 22.00元,9.1,"( - 757106人评价 + 757129人评价 )",献给长成了大人的孩子们 安徒生童话故事集,https://book.douban.com/subject/1046209/,（丹麦）安徒生 , 叶君健 , 人民文学出版社 , 1997-08 , 25.00元,9.3,"( - 132939人评价 + 132945人评价 )",为了争取未来的一代 天龙八部,https://book.douban.com/subject/1255625/,金庸 ,, 生活·读书·新知三联书店 , 1994-5 , 96.00元,9.2,"( - 133112人评价 + 133122人评价 )",有情皆孽，无人不冤 呐喊,https://book.douban.com/subject/1449351/,鲁迅 ,, 人民文学出版社 , 1973-3 , 0.36元,9.2,"( - 160766人评价 + 160786人评价 )",新文学的第一声呐喊 撒哈拉的故事,https://book.douban.com/subject/1060068/,三毛 ,, 哈尔滨出版社 , 2003-8 , 15.80元,9.2,"( - 175392人评价 + 175407人评价 )",游荡的自由灵魂 悉达多,https://book.douban.com/subject/26980487/,[德] 赫尔曼·黑塞 , 姜乙 , 天津人民出版社 , 2017-1 , 32.00元,9.3,"( - 106479人评价 + 106539人评价 )", 邓小平时代,https://book.douban.com/subject/20424526/,【美】傅高义 (Ezra.F.Vogel) , 冯克利 , 生活·读书·新知三联书店 , 2013-1-18 , 88.00元,9.3,"( - 71069人评价 + 71079人评价 )",个人命运背后的历史变局 杀死一只知更鸟,https://book.douban.com/subject/6781808/,[美] 哈珀·李 , 高红梅 , 译林出版社 , 2012-9 , 32.00元,9.2,"( - 147149人评价 + 147155人评价 )",有一种东西不能遵循从众原则，那就是——人的良心 明朝那些事儿（1-9）,https://book.douban.com/subject/3674537/,当年明月 ,, 中国海关出版社 , 2009-4 , 358.20元,9.2,"( - 175420人评价 + 175445人评价 )",不拘一格的历史书写 失踪的孩子,https://book.douban.com/subject/30172069/,[意] 埃莱娜·费兰特 , 陈英 , 人民文学出版社 , 2018-7 , 62.00元,9.2,"( - 81842人评价 + 81858人评价 )",我的整个生命，只是一场为了提升社会地位的低俗斗争。 新名字的故事,https://book.douban.com/subject/26986954/,[意] 埃莱娜·费兰特 , 陈英 , 人民文学出版社 , 2017-4 , 59.00元,9.2,"( - 92415人评价 + 92431人评价 )",探索青年时代的激情、困惑、挣扎、背叛和失去 野草,https://book.douban.com/subject/1915958/,鲁迅 ,, 人民文学出版社 , 1973-3 , 0.20元,9.5,"( - 47588人评价 + 47595人评价 )",我以这一丛野草，在明与暗，生与死，过去与未来之际，献于友与仇，人与兽，爱者与不爱者之前作证。 沉默的大多数,https://book.douban.com/subject/1054685/,王小波 ,, 中国青年出版社 , 1997-10 , 27.00元,9.1,"( - 151713人评价 + 151721人评价 )",沉默是沉默者的通行证 -中国历代政治得失,https://book.douban.com/subject/1003479/,钱穆 ,, 生活·读书·新知三联书店 , 2001 , 12.00元,9.2,"( - 73092人评价 - )",一部简明的“中国政治制度史” -局外人,https://book.douban.com/subject/4908885/,[法] 阿尔贝·加缪 , 柳鸣九 , 上海译文出版社 , 2010-8 , 22.00元,9.1,"( - 240904人评价 - )",人生在世，永远也不该演戏作假 -卡拉马佐夫兄弟,https://book.douban.com/subject/25887924/,[俄] 费奥多尔·陀思妥耶夫斯基 , 荣如德 , 上海译文出版社 , 2015-2-1 , CNY 78.00,9.6,"( - 34533人评价 - )", -白鹿原,https://book.douban.com/subject/10564071/,陈忠实 ,, 人民文学出版社 , 2012-9 , 39.00元,9.2,"( - 108324人评价 - )",一轴关于我们民族灵魂的现实主义画卷 -乡土中国,https://book.douban.com/subject/1795079/,费孝通 ,, 上海人民出版社 , 2006-04-01 , 38.00,9.2,"( - 90918人评价 - )",中国乡土社会传统文化和社会结构理论研究代表作 -人类简史,https://book.douban.com/subject/25985021/,[以色列] 尤瓦尔·赫拉利 , 林俊宏 , 中信出版社 , 2014-11 , 68.00元,9.1,"( - 200052人评价 - )",跟着人类一同走过十万年 -彷徨,https://book.douban.com/subject/1449348/,鲁迅 ,, 人民文学出版社 , 1973-3 , 0.37元,9.3,"( - 65792人评价 - )",路漫漫其修远兮，吾将上下而求索 -围城,https://book.douban.com/subject/1008145/,钱锺书 ,, 人民文学出版社 , 1991-2 , 19.00,9.0,"( - 447516人评价 - )",幽默的语言和对生活深刻的观察 -平凡的世界（全三部）,https://book.douban.com/subject/1200840/,路遥 ,, 人民文学出版社 , 2005-1 , 64.00元,9.0,"( - 324693人评价 - )",中国当代城乡生活全景 -许三观卖血记,https://book.douban.com/subject/4760224/,余华 ,, 作家出版社 , 2012-9 , 24.00元,9.2,"( - 164647人评价 - )", -罗杰疑案,https://book.douban.com/subject/21371175/,[英] 阿加莎·克里斯蒂 , 常禾 , 新星出版社 , 2013-3 , 28.00元,9.2,"( - 75083人评价 - )", -笑傲江湖（全四册）,https://book.douban.com/subject/1002299/,金庸 ,, 生活·读书·新知三联书店 , 1994-5 , 76.80元,9.1,"( - 111981人评价 - )",欲练此功，必先自宫 -我与地坛,https://book.douban.com/subject/1209899/,史铁生 ,, 春风文艺出版社 , 2002-5 , 25.00元,9.2,"( - 109207人评价 - )",这是你的罪孽与福祉 -献给阿尔吉侬的花束,https://book.douban.com/subject/26362836/,[美] 丹尼尔·凯斯 , 陈澄和 , 广西师范大学出版社 , 2015-4 , 36.00元,9.1,"( - 109577人评价 - )",当声称能改造智能的科学实验选中心智障碍主角 -东方快车谋杀案,https://book.douban.com/subject/1827374/,[英] 阿加莎·克里斯蒂 , 陈尧光 , 人民文学出版社 , 2006-5 , 18.00元,9.1,"( - 139928人评价 - )",谋杀诡计惊人，波洛的抉择耐人寻味 -肖申克的救赎,https://book.douban.com/subject/1829226/,[美] 斯蒂芬·金 , 施寄青 , 人民文学出版社 , 2006-7 , 29.90元,9.1,"( - 121711人评价 - )",豆瓣电影Top1原著 -基督山伯爵,https://book.douban.com/subject/1085860/,[法国] 大仲马 , 周克希 , 上海译文出版社 , 1991-12-1 , 43.90元,9.1,"( - 129625人评价 - )",一个报恩复仇的故事，以法国波旁王朝和七月王朝为背景 -江城,https://book.douban.com/subject/7060185/,[美] 彼得·海斯勒 , 李雪顺 , 上海译文出版社 , 2012-1 , 36.00元,9.1,"( - 63156人评价 - )",外国人眼中的涪陵 -城南旧事,https://book.douban.com/subject/1254588/,林海音 文 ,, 中国青年出版社 , 2003-7 , 16.00元,9.1,"( - 157559人评价 - )",长亭外，古道边，芳草碧连天 -故事新编,https://book.douban.com/subject/2046909/,鲁迅 ,, 人民文学出版社 , 1973-12-01 , 0.31 元,9.4,"( - 43530人评价 - )",拾取古代传说，取一点因由，随意点染 -霍乱时期的爱情,https://book.douban.com/subject/10594787/,[哥伦比亚] 加西亚·马尔克斯 , 杨玲 , 南海出版公司 , 2012-9-1 , 39.50元,9.0,"( - 286400人评价 - )",义无反顾地直达爱情的核心 -艺术的故事,https://book.douban.com/subject/3162991/,[英] 贡布里希 (Sir E.H.Gombrich) , 范景中 , 广西美术出版社 , 2008-04 , 280.00,9.6,"( - 26420人评价 - )",从最早的洞窟绘画到当今的实验艺术 -万历十五年,https://book.douban.com/subject/1041482/,[美] 黄仁宇 ,, 生活·读书·新知三联书店 , 1997-5 , 18.00元,9.0,"( - 202421人评价 - )",见微知著，历史观的颠覆 -朝花夕拾,https://book.douban.com/subject/1449352/,鲁迅 ,, 人民文学出版社 , 1973-4 , 0.25元,9.1,"( - 155351人评价 - )",在纷扰中寻出一点闲静 -月亮和六便士,https://book.douban.com/subject/1858513/,[英] 毛姆 , 傅惟慈 , 上海译文出版社 , 2006-8 , 15.00元,9.0,"( - 209986人评价 - )",有多少人会经历顿悟，就有更少的人甘愿自我放逐 -厌女,https://book.douban.com/subject/25836270/,上野千鹤子 , 王兰 , 上海三联书店 , 2015-1 , 28.00,9.1,"( - 82293人评价 - )", -秋园,https://book.douban.com/subject/34998019/,杨本芬 ,, 北京联合出版公司 , 2020-6 , 38.00元,9.0,"( - 109169人评价 - )", -射雕英雄传,https://book.douban.com/subject/1044547/,金庸 ,, 生活·读书·新知三联书店 , 1999-04 , 47.00元,9.1,"( - 85869人评价 - )",侠之大者，为国为民 -置身事内,https://book.douban.com/subject/35546622/,兰小欢 ,, 上海人民出版社 , 2021-8 , 65.00元,9.1,"( - 80571人评价 - )", -追风筝的人,https://book.douban.com/subject/1770782/,[美] 卡勒德·胡赛尼 , 李继宏 , 上海人民出版社 , 2006-5 , 29.00元,8.9,"( - 795653人评价 - )",为你，千千万万遍 -寻路中国,https://book.douban.com/subject/5414391/,[美] 彼得·海斯勒 , 李雪顺 , 上海译文出版社 , 2011-1 , 33.00元,9.0,"( - 57071人评价 - )",《纽约客》驻北京记者驾车漫游中国大陆的经历 -树上的男爵,https://book.douban.com/subject/6789605/,[意大利]伊塔洛·卡尔维诺 , 吴正仪 , 译林出版社 , 2012-4-1 , 30.00元,9.1,"( - 60629人评价 - )",是不是真的只有先与人疏离，才能最终与他们在一起？ -刀锋,https://book.douban.com/subject/2035162/,[英]毛姆 , 周煦良 , 上海译文出版社 , 2007-3 , 18.00元,9.0,"( - 92183人评价 - )",一把刀的锋刃不容易越过；因此智者说得救之道是困难的 -格林童话全集,https://book.douban.com/subject/1043008/,[德国]格林兄弟 , 魏以新 , 人民文学出版社 , 1994-11 , 21.45元,9.1,"( - 95675人评价 - )",一本有教育意义的书 -无人生还,https://book.douban.com/subject/3006581/,[英] 阿加莎・克里斯蒂 , 祁阿红 , 人民文学出版社 , 2008-3 , 19.00,9.0,"( - 150683人评价 - )",童谣杀人案 -中国少年儿童百科全书（全四册）,https://book.douban.com/subject/1028409/,林崇德 主编 ,, 浙江教育出版社 , 1991-4 , 168.00元,9.4,"( - 18725人评价 - )", -西游记（全二册）,https://book.douban.com/subject/1029553/,吴承恩 , 黄肃秋 注释 , 人民文学出版社 , 2004-8 , 47.20元,9.1,"( - 89136人评价 - )",神魔皆有人情，精魅亦通世故 -鼠疫,https://book.douban.com/subject/24257229/,[法] 阿尔贝·加缪 , 刘方 , 上海译文出版社 , 2013-8 , 34.00元,9.1,"( - 79680人评价 - )",用别样的监禁生活再现某种监禁生活，与用不存在的事表现真事同等合理 -嫌疑人X的献身,https://book.douban.com/subject/3211779/,[日] 东野圭吾 , 刘子倩 , 南海出版公司 , 2008-9 , 28.00,8.9,"( - 524826人评价 - )",数学好是一种极致的浪漫 -黄金时代,https://book.douban.com/subject/1089243/,王小波 ,, 花城出版社 , 1999-3 , 19.00元,8.9,"( - 166995人评价 - )",我想爱，想吃，还想在一瞬间变成天上半明半暗的云 -傲慢与偏见,https://book.douban.com/subject/1083428/,[英] 奥斯丁 , 张玲 , 人民文学出版社 , 1993-7 , 13.00元,8.9,"( - 233507人评价 - )",所有现代言情小说的母体 -史记（全十册）,https://book.douban.com/subject/1077847/,司马迁 , （索隐）司马贞，（正义）张守节 , 中华书局 , 1982-11 , 125.00,9.5,"( - 24996人评价 - )",史家之绝唱，无韵之离骚 -可能性的艺术,https://book.douban.com/subject/35819419/,刘瑜 ,, 广西师范大学出版社 , 2022-4 , 82.00元,9.2,"( - 41073人评价 - )", -悲惨世界（上中下）,https://book.douban.com/subject/1205054/,[法] 雨果 , 李丹 , 人民文学出版社 , 1992-6 , 66.00元,9.1,"( - 63956人评价 - )",现实主义与浪漫主义的至高杰作 -始于极限,https://book.douban.com/subject/35966120/,[日] 上野千鹤子 , 曹逸冰 , 新星出版社 , 2022-9-20 , 59,9.0,"( - 71812人评价 - )", -台北人,https://book.douban.com/subject/5337248/,白先勇 ,, 广西师范大学出版社 , 2010-10 , 38.00元,9.0,"( - 74009人评价 - )",白先勇短篇小说集 -永恒的终结,https://book.douban.com/subject/25829693/,[美] 艾萨克·阿西莫夫 , 崔正男 , 江苏凤凰文艺出版社 , 2014-9 , 32.00元,9.1,"( - 47603人评价 - )",关于时间旅行的终极奥秘和恢宏构想 -诗经,https://book.douban.com/subject/1883245/,孔丘 编订 ,, 北京出版社 , 2006-7 , 19.90元,9.5,"( - 28876人评价 - )",思无邪 -刘擎西方现代思想讲义,https://book.douban.com/subject/35313227/,刘擎 ,, 新星出版社 , 2021-1 , 79.00元,9.2,"( - 36670人评价 - )", -孽子,https://book.douban.com/subject/5337254/,白先勇 ,, 广西师范大学出版社 , 2010.10 , 46.00元,9.2,"( - 47872人评价 - )",写给那一群， 在最深最深的黑夜里， 独自彷徨街头， 无所依归的孩子们 -太白金星有点烦,https://book.douban.com/subject/36328704/,马伯庸 ,, 湖南文艺出版社 , 2023-6 , 45.00,9.0,"( - 87402人评价 - )", -历史深处的忧虑,https://book.douban.com/subject/1027191/,林达 ,, 生活·读书·新知三联书店 , 1997-5 , 19.00元,9.0,"( - 45944人评价 - )",窥见美国社会的一扇窗 -神雕侠侣,https://book.douban.com/subject/1255624/,金庸 , 有1996年11月北平第4次印本 , 生活·读书·新知三联书店 , 1994-5 , 76.80元,8.9,"( - 101402人评价 - )",至情至性，情大于武 -上帝掷骰子吗,https://book.douban.com/subject/1467022/,曹天元 ,, 辽宁教育出版社 , 2006-1 , 32.00元,9.2,"( - 34886人评价 - )",量子物理史话 -美丽新世界,https://book.douban.com/subject/27002046/,【英】奥尔德斯·赫胥黎 , 陈超 , 上海译文出版社 , 2017-6 , 45.00元,9.2,"( - 57350人评价 - )", -一个叫欧维的男人决定去死,https://book.douban.com/subject/26672693/,[瑞典] 弗雷德里克·巴克曼 , 宁蒙 , 四川文艺出版社 , 2015-12 , 35.00元,9.1,"( - 68955人评价 - )",这个发生在瑞典的故事，如生命庆典般绚丽斑斓 -哭泣的骆驼,https://book.douban.com/subject/1029111/,三毛 ,, 哈尔滨出版社 , 2003-6 , 15.80元,9.0,"( - 57621人评价 - )",沙漠中寻常的生与死 -灿烂千阳,https://book.douban.com/subject/2143732/,[美] 卡勒德·胡赛尼 , 李继宏 , 上海人民出版社 , 2007-9 , 28.00元,8.9,"( - 122774人评价 - )",唯有希望与爱可以驱散阴霾 -唐诗三百首,https://book.douban.com/subject/1013267/,蘅塘退士 ,, 中华书局 , 1984-07-01 , 0.65,9.4,"( - 27247人评价 - )",熟读唐诗三百首，不会吟诗也会吟 -文学回忆录,https://book.douban.com/subject/20440644/,木心 口述 ,, 广西师范大学出版社 , 2013-1-10 , 98.00元,9.1,"( - 44550人评价 - )",木心留给世界的礼物 -四世同堂,https://book.douban.com/subject/3183775/,老舍 ,, 北京十月文艺出版社 , 2008-07 , 36.00元,9.4,"( - 40323人评价 - )",北平沦陷时代广大平民的悲惨遭遇 -美的历程,https://book.douban.com/subject/3410718/,李泽厚 ,, 生活·读书·新知三联书店 , 2009-7 , 43.00元,9.2,"( - 32363人评价 - )",中国美学经典之作 -窗边的小豆豆,https://book.douban.com/subject/1007914/,[日] 黑柳彻子 著 , 赵玉皎 , 南海出版公司 , 2003-1 , 20.00元,8.8,"( - 212049人评价 - )",真正懂孩子的教育经 -最好的告别,https://book.douban.com/subject/26576861/,[美] 阿图·葛文德（Atul Gawande） , 王一方 主编 , 浙江人民出版社 , 2015-7-31 , 54.90元,9.0,"( - 51157人评价 - )",关于衰老与死亡，你必须知道的常识 -人间词话,https://book.douban.com/subject/1203426/,王国维 ,, 上海古籍出版社 , 1998-12 , 9.80元,9.0,"( - 55412人评价 - )",以新眼光评旧文学 -绝叫,https://book.douban.com/subject/35031587/,[日] 叶真中显 , 林佩瑾 , 北京联合出版公司 , 2020-7 , 58.00元,8.9,"( - 104780人评价 - )", -呼兰河传,https://book.douban.com/subject/1060852/,萧红 ,, 百花文艺出版社 , 2005-01 , 19.00,9.0,"( - 84322人评价 - )",萧红的童年往事 -罪与罚,https://book.douban.com/subject/1858568/,[俄] 陀思妥耶夫斯基 , 岳麟 , 上海译文出版社 , 2006-8 , 23.00元,9.3,"( - 35657人评价 - )",描绘人内心的全部深度 -冬牧场,https://book.douban.com/subject/10522856/,李娟 ,, 新星出版社 , 2012-6 , 29.80元,9.1,"( - 39973人评价 - )",阿勒泰的精灵 -道德经,https://book.douban.com/subject/1059258/,黄元吉 ,, 陕西人民出版社 , 1996-10 , 4.50元,9.5,"( - 20549人评价 - )",中国历史上首部完整的哲学著作 -棋王·树王·孩子王,https://book.douban.com/subject/26734559/,阿城 ,, 江苏凤凰文艺出版社 , 2016-3-1 , 58.00,9.3,"( - 28834人评价 - )", -看见,https://book.douban.com/subject/20427187/,柴静 ,, 广西师范大学出版社 , 2013-1-1 , 39.80元,8.8,"( - 338320人评价 - )",在这里看见中国 -也许你该找个人聊聊,https://book.douban.com/subject/35481512/,[美]洛莉·戈特利布 , 张含笑 , 上海文化出版社 , 2021-7-28 , 68.00元,9.0,"( - 49878人评价 - )", -离开的，留下的,https://book.douban.com/subject/27104959/,[意] 埃莱娜·费兰特 , 陈英 , 人民文学出版社 , 2017-10 , 62.00元,8.9,"( - 75451人评价 - )",探索中年的虚无、困惑、野心和近乎残暴的爱 -浪潮之巅,https://book.douban.com/subject/6709783/,吴军 ,, 电子工业出版社 , 2011-8 , 55.00元,9.0,"( - 33731人评价 - )",了解IT领域的入门读物 diff --git a/book_data.xlsx b/book_data.xlsx index 114e8ce..7942f4b 100644 Binary files a/book_data.xlsx and b/book_data.xlsx differ diff --git a/main.py b/main.py index 040269a..ae37bf5 100644 --- a/main.py +++ b/main.py @@ -80,6 +80,7 @@ class DoubanBookTop250Crawler: price = str(info[2]) else: # 这里可以加入错误处理逻辑，比如打印错误信息 + print(f"Error: 图书信息爬取错误") continue # 跳过当前循环 comment = book.select('.quote span')[0].text if book.select('.quote span') else None # 一句话评价 book_comment = book.select('.quote span')[0].text if book.select('.quote span') else None # 一句话评价 @@ -95,7 +96,7 @@ class DoubanBookTop250Crawler: def crawl_douban_top250(self): headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36'} - for i in range(4): + for i in range(1): page_url = 'https://book.douban.com/top250?start={}'.format(str(i * 25)) print('开始爬取第{}页，地址是:{}'.format(str(i + 1), page_url)) self.get_book_info(page_url, headers) @@ -130,8 +131,11 @@ for book in book_list_data: if book.price.find('/')!=-1: copy_price=book.price.split('/')[1] book.price=book.price.split('/')[0] - copy_book=copy.deepcopy(book) - copy_book.price=copy_price + match = re.search(r'\d+\.\d{2}', copy_price) + if match: + copy_price = match.group() + copy_book = copy.deepcopy(book) + copy_book.price = copy_price book_list_data_two_price.append(copy_book) match=re.search(r'\d+\.\d{2}',book.price) if match: diff --git a/sql.py b/sql.py index c42d7f4..992ced9 100644 --- a/sql.py +++ b/sql.py @@ -44,6 +44,7 @@ class BookDatabase: def insert_books(self, booklist): with self.connection.cursor() as cursor: + cursor.execute("delete from {}".format("books")) insert_query = """ INSERT INTO {table_name} (name, url, star, star_people, author, translater, publisher, pub_year, price, comment) VALUES (%s, %s, %s, %s, %s, %s, %s, %s, %s, %s) @@ -55,6 +56,32 @@ class BookDatabase: book.pub_year, float(book.price), book.comment)) self.connection.commit() self.close() + def get_book_list(self,name=""): + with self.connection.cursor() as cursor: + if len(name.strip()) == 0: + cursor.execute(f"SELECT * FROM {self.table_name}") + book_list = cursor.fetchall() + + return book_list + else: + cursor.execute(f"SELECT * FROM {self.table_name} WHERE name LIKE '%{name}%'") + book_list = cursor.fetchall() + return book_list + self.connection.commit() + self.close() + def login(self,username,password): + with self.connection.cursor() as cursor: + user_list = cursor.execute(f"SELECT * FROM {self.table_name} WHERE username='{username}' AND password='{password}'") + print(user_list) + if user_list >0: + return True + else: + return False + self.connection.commit() + self.close() + + + def initialize_table(self): diff --git a/visualization.py b/visualization.py new file mode 100644 index 0000000..3259f3b --- /dev/null +++ b/visualization.py @@ -0,0 +1,152 @@ +import tkinter as tk +import sql +from tkinter import messagebox +from tkinter import ttk + +db = sql.BookDatabase(host='localhost', user='root', password='123456', database='xiaosuo', table_name='user') +db.initialize_table() + +db_data = sql.BookDatabase(host='localhost', user='root', password='123456', database='xiaosuo', table_name='books') +db_data.initialize_table() + +book_collection=[] +search="" + + +def on_login_button_click(): + username = username_entry.get() + password = password_entry.get() + if db.login(username, password): + print("登录成功！") + app.destroy() + # search_window = tk.Toplevel() + # search_window.title("搜索页面") + # + # # 创建搜索框 + # search_label = tk.Label(search_window, text="搜索：") + # search_label.pack(pady=(20, 0)) + # search_entry = tk.Entry(search_window, width=30) + # search_entry.pack() + # + # # 显示书籍集合数据 + # book_collection = db.get_book_list() + # show_book_collection(search_window, book_collection) + # # 运行新窗口 + show = tk.Tk() + show.title("数据显示页面") + show.geometry("600x400+200+100") + + # 创建搜索框 + # search_label = tk.Label(show, text="搜索：", pady=10) + # search_label.pack() + def serch_book(): + book_collection = db_data.get_book_list(search) + print("我搜索了：") + # 清空当前 Treeview + tree.delete(*tree.get_children()) + book_id = 1 + for book in book_collection: + print(type(book)) + tree.insert("", "end", text=book_id, values=( + book["name"], book["url"], book["star"], book["star_people"], book["author"], book["translater"], + book["publisher"], book["pub_year"], book["price"], book["comment"])) + book_id = book_id + 1 + search_button = tk.Button(show, text="搜索", command=serch_book, width=30, font=15) + search_button.pack() + search_entry = tk.Entry(show, width=30) + search=search_entry.get() + search_entry.pack() + + # 显示书籍集合数据 + book_collection = db_data.get_book_list() + tree = ttk.Treeview(show, columns=("name", "url", "star", "star_people","author", "translater","publisher","pub_year","price","comment")) + tree.heading("#0", text="序号") + tree.heading("name", text="书名") + tree.heading("url", text="链接地址") + tree.heading("star", text="评分") + tree.heading("star_people", text="评分人数") + tree.heading("author", text="作者") + tree.heading("translater", text="译者") + tree.heading("publisher", text="出版社") + tree.heading("pub_year", text="出版年份") + tree.heading("price", text="价格") + tree.heading("comment", text="评论") + + tree.column("#0", width=10) # 序号列 + tree.column("name", width=30) # 书名列 + tree.column("url", width=30) # 链接地址列 + tree.column("author", width=20) # 作者列 + tree.column("publisher", width=30) # 出版社列 + tree.column("pub_year", width=30) + tree.column("price", width=5) # 价格列 + tree.column("comment", width=30) + tree.column("star", width=30) # 评分列 + tree.column("star_people", width=30) # 评分人数列 + tree.column("translater", width=20) + + book_id=1 + for book in book_collection: + print(type(book)) + tree.insert("", "end", text=book_id, values=(book["name"], book["url"], book["star"], book["star_people"], book["author"], book["translater"], book["publisher"], book["pub_year"], book["price"], book["comment"])) + book_id=book_id+1 + # #布局管理器 + #tree.grid(row=1, column=0, columnspan=2) + # 使用水平滚动条 + tree.pack(fill="x") + + # 运行应用程序 + show.mainloop() + else: + messagebox.showinfo("登录失败", "用户名或密码错误") + +# 创建 Tkinter 应用程序 +app = tk.Tk() +app.title("登录界面") +app.geometry("500x450+400+100") + +# 创建用户名和密码输入框 +username_label = tk.Label(app, text="用户名",font=16) +username_label.pack(pady=(120,0)) +username_entry = tk.Entry(app,width=30) +username_entry.pack() + +password_label = tk.Label(app, text="密码",font=16) +password_label.pack() +password_entry = tk.Entry(app, show="*",width=30) +password_entry.pack() + +login_button = tk.Button(app, text="登录", command=on_login_button_click,width=15,font=15) +login_button.pack() + +# 运行应用程序 +app.mainloop() +# 数据显示页面 +def show_data(): + search_window = tk.Toplevel() + search_window.title("搜索页面") + + # 创建搜索框 + search_label = tk.Label(search_window, text="搜索：") + search_label.pack(pady=(20, 0)) + search_entry = tk.Entry(search_window, width=30) + search_entry.pack() + + # 显示书籍集合数据 + book_collection = db.get_book_list() + show_book_collection(search_window, book_collection) + # 运行新窗口 + search_window.mainloop() +def show_book_collection(window, book_collection): + tree = ttk.Treeview(window) + tree["columns"] = ("name", "author", "publisher", "price") + tree.heading("#0", text="ID") + tree.heading("name", text="书名") + tree.heading("author", text="作者") + tree.heading("publisher", text="出版社") + tree.heading("price", text="价格") + for book in book_collection: + tree.insert("", "end", text=book.id, values=(book.name, book.author, book.publisher, book.price)) + tree.pack() + window.mainloop() + +