从源码看Android中sqlite是怎么通过cursorwindow读DB的

执行query

执行SQLiteDatabase类中query系列函数时,只会构造查询信息,不会执行查询。

(query的源码追踪路径)

执行move(里面的fillwindow是真正打开文件句柄并分配内存的地方)

当执行Cursor的move系列函数时,第一次执行,会为查询结果集创建一块共享内存,即cursorwindow

moveToPosition源码路径

fillWindow----真正耗时的地方

然后会执行sql语句,向共享内存中填入数据,

fillWindow源码路径

在SQLiteCursor.java中可以看到

 1 @Override
 2 public boolean onMove(int oldPosition, int newPosition) {
 3     // Make sure the row at newPosition is present in the window
 4     if (mWindow == null || newPosition < mWindow.getStartPosition() ||
 5             newPosition >= (mWindow.getStartPosition() + mWindow.getNumRows())) {
 6         fillWindow(newPosition);
 7     }
 8 
 9     return true;
10 }

如果请求查询的位置在cursorWindow的范围内,不会执行fillWindow,

而超出cursorwindow的范围,会调用fillWindow,

而在nativeExecuteForCursorWindow中,

获取记录时,如果要请求的位置超出窗口范围,会发生CursorWindow的清空:

 1 CopyRowResult cpr = copyRow(env, window, statement, numColumns, startPos, addedRows);  
 2 if (cpr == CPR_FULL && addedRows && startPos + addedRows < requiredPos) {  
 3 // We filled the window before we got to the one row that we really wanted. 
 4 // Clear the window and start filling it again from here.  
 5 // TODO: Would be nicer if we could progressively replace earlier rows.  
 6 window->clear();  
 7 window->setNumColumns(numColumns);  
 8 startPos += addedRows;  
 9 addedRows = 0;  
10 cpr = copyRow(env, window, statement, numColumns, startPos, addedRows);  
11 }  

CursorWindow的清空机制会影响到多线程读(通常认为不可以并发读写,sqlite的并发实际上是串行执行的,但可以并发读,这里要强调的是多线程读也可能有问题),具体见稍后一篇文章“listview并发读写数据库”。

 上面说的这些直观的感受是什么样的呢?大概是这样,

  执行query,读10000条数据,很快就拿到了cursor,这里不会卡,

  执行moveToFirst,卡一下(fillwindow(0))

  moveToPosition(7500),卡一下,因为已经超了cursorwindow的区域,又去fillwindow(7500),

  关于fillwindow还有一些奇特的细节,比如4.0以后,fillwindow会填充position前后各一段数据,防止读旧数据的时候又需要fill,感兴趣的同学可以看看各个版本fillwidow的源码。

  这里还可以延伸一下,因为高版本的android sqlite对旧版有许多改进,

  所以实际开发里我们有时候会把sqlite的源码带在自己的工程里,使得低版本的android也可以使用高版本的特性,并且避开一部分兼容性问题。

Cursor关闭(显式调用close()的理由)

追踪源码看关闭

 1  //SQLiteCursor
 2 
 3 super.close();
 4 synchronized (this) {
 5     mQuery.close();
 6     mDriver.cursorClosed();
 7 }
 8 
 9 
10 //AbstractCursor
11 
12 public void close() {
13     mClosed = true;
14     mContentObservable.unregisterAll();
15     onDeactivateOrClose();
16 }
17 
18 protected void onDeactivateOrClose() {
19     if (mSelfObserver != null) {
20         mContentResolver.unregisterContentObserver(mSelfObserver);
21         mSelfObserverRegistered = false;
22     }
23     mDataSetObservable.notifyInvalidated();
24 }
25 
26 
27 //AbstractWindowedCursor
28 
29 /** @hide */
30 @Override
31 protected void onDeactivateOrClose() {
32     super.onDeactivateOrClose();
33     closeWindow();
34 }
35 
36 protected void closeWindow() {
37     if (mWindow != null) {
38         mWindow.close();
39         mWindow = null;
40     }
41 }
42 
43  
44 
45 //SQLiteClosable
46 
47 public void close() {
48     releaseReference();
49 }
50 
51 public void releaseReference() {
52     boolean refCountIsZero = false;
53     synchronized(this) {
54         refCountIsZero = --mReferenceCount == 0;
55     }
56     if (refCountIsZero) {
57         onAllReferencesReleased();
58     }
59 }
60 
61 //CursorWindow
62 
63 @Override
64 protected void onAllReferencesReleased() {
65     dispose();
66 }
67 
68 private void dispose() {
69     if (mCloseGuard != null) {
70         mCloseGuard.close();
71     }
72     if (mWindowPtr != 0) {
73         recordClosingOfWindow(mWindowPtr);
74         nativeDispose(mWindowPtr);
75         mWindowPtr = 0;
76     }
77 }

View Code

跟CursorWindow有关的路径里,最终调用nativeDispose()清空cursorWindow;

当Cursor被GC回收时,会调用finalize:

 1 @Override
 2 protected void finalize() {
 3     try {
 4         // if the cursor hasn't been closed yet, close it first
 5         if (mWindow != null) {
 6             if (mStackTrace != null) {
 7                 String sql = mQuery.getSql();
 8                 int len = sql.length();
 9                 StrictMode.onSqliteObjectLeaked(
10                     "Finalizing a Cursor that has not been deactivated or closed. " +
11                     "database = " + mQuery.getDatabase().getLabel() +
12                     ", table = " + mEditTable +
13                     ", query = " + sql.substring(0, (len > 1000) ? 1000 : len),
14                     mStackTrace);
15             }
16             close();
17         }
18     } finally {
19         super.finalize();
20     }
21 }

然而finalize()并没有释放CursorWindow,而super.finalize();里也只是解绑了观察者,没有去释放cursorwindow

所以不调用cursor.close(),最终会导致cursorWindow所在的共享内存(1M或2M)泄露。

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏柠檬先生

vuex 使用文档

安装 直接下载CDN 引用   <script src="/path/to/vue.js"></script>   <script src="/path/to/...

49110
来自专栏Netkiller

Nginx rewrite 获取问好“?”后面的参数

节选自 《Netkiller Web 手札》 3.2.4.1. http get 参数处理 需求如下 原理地址: http://www.netkiller.c...

2885
来自专栏Java帮帮-微信公众号-技术文章全总结

Web-第十七天 监听器Listener【悟空教程】

当我们使用QQ时,在生日当天会收到QQ系统发送的祝福邮件。今天我们将实现相同的功能。

1304
来自专栏抠抠空间

Flask之基本使用与配置

Flask是一个基于Python开发并且依赖jinja2模板和Werkzeug WSGI服务的一个微型框架,对于Werkzeug本质是Socket服务端,其用于...

892
来自专栏技术碎碎念

servlet请求转发、包含以及重定向

请求转发: 方式一:   ServletContext对象.getRequestDispatcher(目标资源的URI).forward(request,res...

2936
来自专栏抠抠空间

Flask之flask-session

1153
来自专栏咸鱼不闲

过滤器, 拦截器,监听器

下面介绍过滤器和拦截器以及监听器的使用方法: 执行顺序 :监听器 > 过滤器 > 拦截器

1683
来自专栏开发技术

shiro源码篇 - shiro的session共享,你值得拥有

    老师对小明说:"乳就是小的意思,比如乳猪就是小猪,乳名就是小名,请你用乳字造个句"     小明:"我家很穷,只能住在40平米的乳房"     老师:"...

1954
来自专栏hotqin888的专栏

DOC文件中法规对标系统完成

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/hotqin888/article/det...

641
来自专栏Ryan Miao

在jfinal中使用druid,并配置查看权限

首先导入druid包,然后配置configPlugin 1 @Override 2 public void configPlugin(Plugins...

39215

扫码关注云+社区