初学国学,请推荐本字典
新华网北京2月28日电大型中华古籍全文数据库《国学宝典》网络版正式推出。汤一介、乐黛云、庞朴、曹先擢、范增、傅璇琮、刘梦溪、张燕瑾等社会各界专家学者和全国各地高校与研究机构近200人出席了昨天在京举行的成果展示会。
随着中国经济近年来的高速发展,中国文化也正在世界范围迅速传播并产生越来越大的影响。如何让浩如烟海的中国古籍文献乘上现代技术的快车,通过互联网走向世界,是这套系统研制者们的初衷。北京国学时代文化传播有限公司依托首都师范大学组织国内一批文史专家,经过长达6年的资料搜集、电子化校勘,终于在今年1月取得古籍网络数据库检索的重大突破,完成了《国学宝典》网上检索系统,即《国学宝典》网络版()。
该系统采用国际通用的unicode汉字编码,字库容量大,扩展性强,可在全球所有网络浏览器上正确显示汉字。《国学宝典》网络版具有大、快、强三大特点:
一是规模大。共收入古籍3800多部,总字数逾8亿字,收书种类和总字数都超过了《四库全书》,一批通俗小说、戏曲均大多为《四库》未收。而且这些文献内容均为文史研究人员常用资料,实用价值很大。数据库目前仍以每年二至三亿字的速度继续扩充。
二是速度快。《国学宝典》网络版使用了最先进的搜索引擎技术,检索速度奇快,从8亿字近10万卷的古籍数据库中任意范围查找任何一个字(词),都可以在一秒钟内得到结果,可满足数千人同时在线检索。即使以后继续增加数据,其检索速度也不会下降。
三是功能强。数据库中不仅可以检索字词和句子,而且可以多条件组合检索,检索结果可直接保存,检索范围可由用户自己设定,既可以是全部三千多种书,也可以是经、史、子、集中的某一大类,还可以是十三经、二十四史、六十种曲等特定专题,甚至可以指定在某一卷书中查询。此外,古汉语字典、整卷查看、内容提要、繁简转换、帝王年号表等多种功能均可实现网上在线使用。特别值得一提的是,这套先进的检索系统已经可以在普通彩信手机上实现全部功能。
与会专家学者提出,网络版《国学宝典》的出版,不仅扩展、延伸了中国优秀传统文化在中外的影响,而且使它拥有了巨大的创造附加值,更好地传播中华民族优秀文化,建设社会主义精神文明,提供了现代化的技术支持。(完)(来源:新华网)
不知道你说的编写数据库登录程序是什么意思。
如果只是操作数据库,一般是一下几个步骤:
1、安装数据库软件,比如mysql
2、在安装的过程中,安装程序就会提示你进行配置,一般是设置用户名、密码
3、下载数据库查询工具,其实就是个可视化的界面,如果你有自己的程序,只需要使用自己的系统操作数据库,这个可以跳过。不过还是建议你下一个查询工具,经常会用到。
4、打开查询工具,输入用户名密码,连接成功后,在打开的界面上写sql脚本,执行。
5、如果没有查询工具,需要在你自己的程序里写数据库连接串,里面也是些数据库IP、名称、用户名、密码等信息,然后使用自己所用的语言里提供的数据库操作类进行连接。连上后,发送sql脚本语句进行操作。
创建数据库 选择开始菜单中→程序→Management SQL Server 2008→SQL Server Management Studio命令,打开SQL Server Management Studio窗口,并使用Windows或 SQL Server身份验证建立连接。
1合理使用索引\x0d\索引是数据库中重要的数据结构,它的根本目的就是为了提高查询效率。现在大多数的数据库产品都采用IBM最先提出的ISAM索引结构。\x0d\索引的使用要恰到好处,其使用原则如下:\x0d\在经常进行连接,但是没有指定为外键的列上建立索引,而不经常连接的字段则由优化器自动生成索引。\x0d\在频繁进行排序或分组(即进行group by或order by操作)的列上建立索引。\x0d\在条件表达式中经常用到的不同值较多的列上建立检索,在不同值少的列上不要建立索引。比如在雇员表的“性别”列上只有“男”与“女”两个不同值,因此就无必要建立索引。如果建立索引不但不会提高查询效率,反而会严重降低更新速度。\x0d\如果待排序的列有多个,可以在这些列上建立复合索引(compound index)。\x0d\使用系统工具。如Informix数据库有一个tbcheck工具,可以在可疑的索引上进行检查。在一些数据库服务器上,索引可能失效或者因为频繁操作而 使得读取效率降低,如果一个使用索引的查询不明不白地慢下来,可以试着用tbcheck工具检查索引的完整性,必要时进行修复。另外,当数据库表更新大量 数据后,删除并重建索引可以提高查询速度。\x0d\(1)在下面两条select语句中:\x0d\SELECT FROM table1 WHERE field1=0; \x0d\SELECT FROM table1 WHERE field1>=0 AND field1=0,则第一条select语句要比第二条select语句效率高的多,因为第二条select语句的第一个条件耗费了大量的系统资源。\x0d\第一个原则:在where子句中应把最具限制性的条件放在最前面。\x0d\(2)在下面的select语句中:\x0d\SELECT FROM tab WHERE a= AND b= AND c=;\x0d\若有索引index(a,b,c),则where子句中字段的顺序应和索引中字段顺序一致。\x0d\第二个原则:where子句中字段的顺序应和索引中字段顺序一致。\x0d\—————————————————————————— \x0d\以下假设在field1上有唯一索引I1,在field2上有非唯一索引I2。 \x0d\—————————————————————————— \x0d\(3) SELECT field3,field4 FROM tb WHERE field1='sdf' 快 \x0d\SELECT FROM tb WHERE field1='sdf' 慢[/cci]\x0d\因为后者在索引扫描后要多一步ROWID表访问。\x0d\(4) SELECT field3,field4 FROM tb WHERE field1>='sdf' 快 \x0d\SELECT field3,field4 FROM tb WHERE field1>'sdf' 慢\x0d\因为前者可以迅速定位索引。\x0d\(5) SELECT field3,field4 FROM tb WHERE field2 LIKE 'R%' 快 \x0d\SELECT field3,field4 FROM tb WHERE field2 LIKE '%R' 慢,\x0d\因为后者不使用索引。\x0d\(6) 使用函数如: \x0d\SELECT field3,field4 FROM tb WHERE upper(field2)='RMN'不使用索引。\x0d\如果一个表有两万条记录,建议不使用函数;如果一个表有五万条以上记录,严格禁止使用函数!两万条记录以下没有限制。\x0d\(7) 空值不在索引中存储,所以 \x0d\SELECT field3,field4 FROM tb WHERE field2 IS[NOT] NULL不使用索引。\x0d\(8) 不等式如 \x0d\SELECT field3,field4 FROM tb WHERE field2!='TOM'不使用索引。 \x0d\相似地, \x0d\SELECT field3,field4 FROM tb WHERE field2 NOT IN('M','P')不使用索引。\x0d\(9) 多列索引,只有当查询中索引首列被用于条件时,索引才能被使用。\x0d\(10) MAX,MIN等函数,使用索引。 \x0d\SELECT max(field2) FROM tb 所以,如果需要对字段取max,min,sum等,应该加索引。\x0d\一次只使用一个聚集函数,如: \x0d\SELECT “min”=min(field1), “max”=max(field1) FROM tb \x0d\不如:SELECT “min”=(SELECT min(field1) FROM tb) , “max”=(SELECT max(field1) FROM tb)\x0d\(11) 重复值过多的索引不会被查询优化器使用。而且因为建了索引,修改该字段值时还要修改索引,所以更新该字段的操作比没有索引更慢。\x0d\(12) 索引值过大(如在一个char(40)的字段上建索引),会造成大量的I/O开销(甚至会超过表扫描的I/O开销)。因此,尽量使用整数索引。 Sp_estspace可以计算表和索引的开销。\x0d\(13) 对于多列索引,ORDER BY的顺序必须和索引的字段顺序一致。\x0d\(14) 在sybase中,如果ORDER BY的字段组成一个簇索引,那么无须做ORDER BY。记录的排列顺序是与簇索引一致的。\x0d\(15) 多表联结(具体查询方案需要通过测试得到) \x0d\where子句中限定条件尽量使用相关联的字段,且尽量把相关联的字段放在前面。 \x0d\SELECT afield1,bfield2 FROM a,b WHERE afield3=bfield3\x0d\field3上没有索引的情况下: \x0d\对a作全表扫描,结果排序 \x0d\对b作全表扫描,结果排序 \x0d\结果合并。 \x0d\对于很小的表或巨大的表比较合适。\x0d\field3上有索引 \x0d\按照表联结的次序,b为驱动表,a为被驱动表 \x0d\对b作全表扫描 \x0d\对a作索引范围扫描 \x0d\如果匹配,通过a的rowid访问\x0d\(16) 避免一对多的join。如: \x0d\SELECT tb1field3,tb1field4,tb2field2 FROM tb1,tb2 WHERE tb1field2=tb2field2 AND tb1field2=‘BU1032’ AND tb2field2= ‘aaa’ \x0d\不如: \x0d\declare @a varchar(80) \x0d\SELECT @a=field2 FROM tb2 WHERE field2=‘aaa’ \x0d\SELECT tb1field3,tb1field4,@a FROM tb1 WHERE field2= ‘aaa’\x0d\(16) 子查询 \x0d\用exists/not exists代替in/not in操作 \x0d\比较: \x0d\SELECT afield1 FROM a WHERE afield2 IN(SELECT bfield1 FROM b WHERE bfield2=100) \x0d\SELECT afield1 FROM a WHERE EXISTS( SELECT 1 FROM b WHERE afield2=bfield1 AND bfield2=100) \x0d\SELECT field1 FROM a WHERE field1 NOT IN( SELECT field2 FROM b) \x0d\SELECT field1 FROM a WHERE NOT EXISTS( SELECT 1 FROM b WHERE bfield2=afield1)\x0d\(17) 主、外键主要用于数据约束,sybase中创建主键时会自动创建索引,外键与索引无关,提高性能必须再建索引。\x0d\(18) char类型的字段不建索引比int类型的字段不建索引更糟糕。建索引后性能只稍差一点。\x0d\(19) 使用count()而不要使用count(column_name),避免使用count(DISTINCT column_name)。\x0d\(20) 等号右边尽量不要使用字段名,如: \x0d\SELECT FROM tb WHERE field1 = field3\x0d\(21) 避免使用or条件,因为or不使用索引。\x0d\2避免使用order by和group by字句。\x0d\因为使用这两个子句会占用大量的临时空间(tempspace),如果一定要使用,可用视图、人工生成临时表的方法来代替。 \x0d\如果必须使用,先检查memory、tempdb的大小。 \x0d\测试证明,特别要避免一个查询里既使用join又使用group by,速度会非常慢!\x0d\3尽量少用子查询,特别是相关子查询。因为这样会导致效率下降。\x0d\一个列的标签同时在主查询和where子句中的查询中出现,那么很可能当主查询中的列值改变之后,子查询必须重新查询一次。查询嵌套层次越多,效率越低,因此应当尽量避免子查询。如果子查询不可避免,那么要在子查询中过滤掉尽可能多的行。\x0d\4.消除对大型表行数据的顺序存取\x0d\在 嵌套查询中,对表的顺序存取对查询效率可能产生致命的影响。 \x0d\比如采用顺序存取策略,一个嵌套3层的查询,如果每层都查询1000行,那么这个查询就要查询 10亿行数据。 \x0d\避免这种情况的主要方法就是对连接的列进行索引。 \x0d\例如,两个表:学生表(学号、姓名、年龄)和选课表(学号、课程号、成绩)。如果两个 表要做连接,就要在“学号”这个连接字段上建立索引。 \x0d\还可以使用并集来避免顺序存取。尽管在所有的检查列上都有索引,但某些形式的where子句强迫优化器使用顺序存取。 \x0d\下面的查询将强迫对orders表执行顺序操作: \x0d\SELECT * FROM orders WHERE (customer_num=104 AND order_num>1001) OR order_num=1008 \x0d\虽然在customer_num和order_num上建有索引,但是在上面的语句中优化器还是使用顺序存取路径扫描整个表。因为这个语句要检索的是分离的行的集合,所以应该改为如下语句: \x0d\SELECT * FROM orders WHERE customer_num=104 AND order_num>1001 \x0d\UNION \x0d\SELECT * FROM orders WHERE order_num=1008 \x0d\这样就能利用索引路径处理查询。\x0d\5.避免困难的正规表达式\x0d\MATCHES和LIKE关键字支持通配符匹配,技术上叫正规表达式。但这种匹配特别耗费时间。例如:SELECT * FROM customer WHERE zipcode LIKE “98_ _ _” \x0d\即使在zipcode字段上建立了索引,在这种情况下也还是采用顺序扫描的方式。如果把语句改为SELECT * FROM customer WHERE zipcode >“98000”,在执行查询时就会利用索引来查询,显然会大大提高速度。 \x0d\另外,还要避免非开始的子串。例如语句:SELECT * FROM customer WHERE zipcode[2,3] >“80”,在where子句中采用了非开始子串,因而这个语句也不会使用索引。\x0d\6.使用临时表加速查询\x0d\把表的一个子集进行排序并创建临时表,有时能加速查询。它有助于避免多重排序操作,而且在其他方面还能简化优化器的工作。例如: \x0d\SELECT custname,rcvblesbalance,other COLUMNS \x0d\FROM cust,rcvbles \x0d\WHERE custcustomer_id = rcvlbescustomer_id \x0d\AND rcvbllsbalance>0 \x0d\AND custpostcode>“98000” \x0d\ORDER BY custname \x0d\如果这个查询要被执行多次而不止一次,可以把所有未付款的客户找出来放在一个临时文件中,并按客户的名字进行排序: \x0d\SELECT custname,rcvblesbalance,other COLUMNS \x0d\FROM cust,rcvbles \x0d\WHERE custcustomer_id = rcvlbescustomer_id \x0d\AND rcvbllsbalance>;0 \x0d\ORDER BY custname \x0d\INTO TEMP cust_with_balance \x0d\然后以下面的方式在临时表中查询: \x0d\SELECT * FROM cust_with_balance \x0d\WHERE postcode>“98000” \x0d\临时表中的行要比主表中的行少,而且物理顺序就是所要求的顺序,减少了磁盘I/O,所以查询工作量可以得到大幅减少。 \x0d\注意:临时表创建后不会反映主表的修改。在主表中数据频繁修改的情况下,注意不要丢失数据。\x0d\7.用排序来取代非顺序存取\x0d\非顺序磁盘存取是最慢的操作,表现在磁盘存取臂的来回移动。SQL语句隐藏了这一情况,使得我们在写应用程序时很容易写出要求存取大量非顺序页的查询。
privot多对多关系的中间表。PT5框架会自动把privot带上。
我们需要隐藏,因为我们不需要privot,而且pritvot也不在我们模型本身,他是中间数据
另外冗余字段,我们有一个表是记录的,另一个表是记录商品的。
我们可以在你放商品里的url
同时商品里放id和URL
这两个字段是重复的,这就是数据冗余,我们设计数据库是不要出现冗余信息,为啥我们用冗余呢。
主要是为了出于对查询性能的考虑。
我们在这里做了数据冗余,我们就可以减少对表的查询,加速查询速度!
不过推荐大家滥用数据冗余,因为数据冗余对于数据完整性,和一致性维护很困难。有两个地方记录相同的信息,但我们去写入数据的时候,就需要写入到两个地方。最大的问题在于删除和跟新。更新的时候一个地方的IMG改变了,要更改两个。否则就会产生数据不一致。不过数据冗余用的还是挺多的。
在WEB开发中,除了掌握一些必要的数据库优化技巧外,在合适的时候使用冗余字段也可以做到事半功倍的效果。比如下面这样一个例子,有这么几个表,是这么设计的。
用户表[user]:id,userName
项目表[project]:id,projectName, user_id
版本表[version]:id,versionName,project_id
分类表[category]:id,categoryName,version_id
内容表[content]:id,text,category_id
差不多就是这样了。看着很不错,没有字段冗余。也符合数据库设计的三大范式。
那我们先提个问题,命名为问题X吧。
问题X:如果要查询某个版本下的内容列表,sql应该是这么写的:
select c from content c, category t where ccategory_id=tid and tversion_id=
好像也没什么问题。要怎么优化这个查询呢?这个问题我们最后再来说。讲回上面的表设计,如果有这样一个问题。举个例子,我要查询内容A是否属于用户U,那我应该怎么做?
查询内容A所属的分类B
查询分类B所属的版本C
查询版本C所属的项目D
查询项目D是否属于用户U,从而得出内容A是否属于用户U
这样的做法简直恶劣至极不是吗。此时你应该已深刻意识到这种表设计弱爆之处。那怎么做呢?
冗余字段!没错,我们需要在表里添加冗余字段。如果在上述表(除了user表)都添加一个user_id字段,会怎么样呢?
首先,可以确定,每个表的user_id字段的值都不会发生改变。所以,这个字段的值从一开始设定之后,就不用再修改了。
然后,我们再回到上述的问题:查询内容A是否属于用户U。现在的做法是这样的:
查询内容A的user_id是否为用户U的id
就一步!好简单粗暴是吧!很爽快是吧!
只需添加user_id这个冗余字段,就很大程度地方便了编码量,而且数据库的查询效率也提升N倍。还有,这个字段只需要维护一次!
现在知道冗余字段的威力了吧,回到问题X。怎么优化那个业务逻辑呢?
正确的做法应该是:在content表中,添加多一个version_id字段,可以肯定,这个字段跟user_id字段类似,只需要维护一次。
然后问题X的sql改为:
select c from content c where cversion_id=
相当简单的sql!
以上说明,有时候,适当的数据库冗余是个不错的选择。
总结
本文2023-08-05 11:51:49发表“古籍资讯”栏目。
本文链接:https://www.yizhai.net/article/21334.html