1.使用SQLite数据库加密敏感信息嵌入程序(3)
2.node-pre-gyp以及node-gyp的码分源码简单解析（以安装sqlite3为例）
3.linux中sqlite数据库的简单使用
4.如何编译SQLite-How To Compile SQLite
5.Python程序开发系列利用Peewee库创建SQLite数据库、建表并写入数据（案例+源码）
6.独家食用指南系列|Android端SQLCipher的码分攻与防新编

使用SQLite数据库加密敏感信息嵌入程序(3)

       在前两篇文章中，我们探讨了如何使用工具和原生函数生成SQLite数据库，码分以及如何将生成的码分数据库作为资源嵌入到程序中使用。目标是码分实现程序运行时直接在内存中读取敏感信息，无需将资源保存到临时文件再获取信息的码分八字算命 源码繁琐步骤。实现这一目标的码分关键在于SQLite的跨平台利器——虚拟文件系统（VFS）。

       VFS是码分SQLite底层与操作系统交互的关键，它提供了一种抽象的码分文件系统接口，使得SQLite能够在不同操作系统上一致地工作。码分每当SQLite需要与操作系统通信时，码分它会调用VFS中的码分方法，VFS则调用具体的码分操作代码以满足请求。因此，码分将SQLite移植到新的码分操作系统仅需编写新的操作系统接口层，也就是“VFS”。

       SQLite支持多个VFS，每个VFS都有唯一的名称，并且同一进程中的数据库连接可以同时使用不同的VFS。Windows版本自带多个内置VFS，其中“win”适用于大多数应用程序。VFS在SQLite源码中通过sqlite3_vfs对象结构定义。

       要实现标准VFS，可以子类化三个对象：sqlite3_vfs（操作系统接口对象）、sqlite3_io_methods（操作系统接口文件虚拟方法对象）、sqlite3_file（操作系统文件对象）。实现时只需子类化sqlite3_vfs和sqlite3_io_methods，而sqlite3_file对象代表一个打开的文件。

       sqlite3_file对象在打开文件时由sqlite3_vfs的xOpen方法构造，它跟踪文件状态，包含指向sqlite3_io_methods对象的指针，该指针仅适用于当前sqlite3_file对象。sqlite3_io_methods对象执行文件读写、大小查找、cpickle源码分析锁定与解锁、文件关闭等操作。

       新构造的sqlite3_vfs通过sqlite3_vfs_register函数注册，sqlite3_file对象则从sqlite3_vfs的xOpen方法返回，指向一个sqlite3_io_methods对象实例。SQLite源码中定义了sqlite3_io_methods和sqlite3_file结构。

       TBNSQLiteFile和TBNSQLiteVfs结构是Delphi版中用于实现SQLite文件和VFS的子类化接口。TBNSQLitFile结构扩展了sqlite3_file接口，增加了额外字段如实际路径、数据缓冲区和访问标志等。TBNSQLiteVfs结构实现自定义的sqlite3_vfs，构建了一个链表结构，用于管理VFS。

       为了方便读取嵌入程序中的SQLite数据库，我们实现了一个名为TBNSQLitIoMethodUtils的类，作为sqlite3_io_methods的子类化实现。这个类主要实现了xRead和xFileSize方法，用于读取数据库文件数据。其他方法如xWrite等因为操作为只读性质，此处忽略实现，返回值为SQLITE_OK即可。实现代码通过静态方法简化，以匹配SQLite原生函数调用方式。

       总结，通过精心设计的VFS、文件对象和IO方法实现，我们能够高效、安全地将敏感信息存储在嵌入程序的SQLite数据库中，并在程序运行时直接在内存中读取，无需额外的文件操作步骤。接下来，我们将深入探讨如何实现TBNSQLiteVfsUtils类以进一步优化VFS功能。

node-pre-gyp以及node-gyp的源码扫描制度源码简单解析（以安装sqlite3为例）

       在Node.js开发中，确保模块跨平台性至关重要，尤其当涉及到使用C/C++原生代码的模块，如SQLite3。让我们通过一个实例来理解安装这种原生模块的过程，以SQLite3为例。

       项目初始化

       首先，创建一个基础的Node.js项目，我们开始安装SQLite3。

       安装SQLite3

       执行安装命令后，你会看到命令行输出关键信息：

       node-pre-gyp的引入

       在安装过程中，你会遇到node-pre-gyp，这个工具与node-gyp和gyp紧密相关。gyp是一个用于生成项目文件的构建工具，它为Chromium项目生成IDE项目文件，如Visual Studio和Xcode。而node-gyp则是专为Node.js Addons（原生模块）编译设计的，它允许在本地编译C/C++代码。

       node-pre-gyp的作用

       为了简化每次安装时的平台编译工作，node-pre-gyp允许预先为常见平台生成二进制文件。当项目尝试安装时，它会优先查找预编译的二进制包，如果找不到，才会转而依赖node-gyp进行源码编译。

       安装流程

       当我们使用`npm install sqlite3`时，实际上执行了`node-pre-gyp install --fallback-to-build`。安装流程包括：

       检查node-pre-gyp是否已安装，如果没有，npm会自动安装。

       node-pre-gyp查找预编译二进制包，如果存在，则直接使用。

       如果没有找到，使用node-gyp进行源码编译。openwrt ssr源码

       深入了解SQLite3安装

       查看sqlite3的package.json，`scripts`部分包含了`node-pre-gyp install`命令。npm会根据这个脚本执行安装过程。

       源码编译与node-gyp

       node-gyp的`build.js`负责执行编译任务，通过`gyp`工具生成特定平台的项目文件，如Windows的vcxproj，然后使用MSBuild编译。

       node-pre-gyp与node-gyp的交互

       node-pre-gyp的`do_build`模块调用node-gyp build，执行具体的编译操作，确保模块能在目标平台上正确工作。

linux中sqlite数据库的简单使用

       一、数据库的安装

       1. 网络安装：配置好网络源后，使用命令 sudo apt-get install sqlite3 安装。

       2. 使用deb包安装：使用命令 sudo dpkg -i *.deb 安装三个deb包。

       3. 使用源码包安装：首先解压文件 tar xzf sqlite-autoconf-.tar.gz，然后执行 ./configure，接着执行 make && make install。

       二、SQLite命令

       1. 创建数据库：执行命令 sqlite3 company.db。

       2. 帮助：使用命令 .help。

       3. 退出：使用命令 .quit。

       4. 显示当前数据库文件：使用命令 .database。

       5. 显示所有表名：使用命令 .tables。

       6. 查看表结构：使用命令 .schema。

       7. 控制显示格式：使用命令 .mode column 和 .header on。

       三、SQLite数据类型

       数据类型包括：null、integer、real、text、blob。

       表结构包括：行（记录）、列（字段）、移民app源码值（字段值）。

       四、SQL命令

       1. 创建表（主键）：使用命令 create table table_name( column1 datatype primary key, column2 datatype, ... columnn datatype, );。

       2. 删除表：使用命令 drop table table_name;。

       3. 插入数据：指定列插入使用命令 insert into table_name (column1, column2, ...columnn) values (value1, value2, ...valuen);，所有列插入使用命令 insert into table_name values (value1,value2,value3,...valuen);。

       4. 查询语句：查询所有使用命令 select * from table_name;，查询指定列使用命令 select column1, column2, ...columnn from table_name;，条件查找使用命令 select * from table_name where ...;。

       5. 删除记录：使用命令 delete from table_name where condition;。

       6. 修改记录：使用命令 update table_name set column1 = value1, column2 = value2,..., columnn = valuen where condition;。

       五、Linux编程接口

       1. 打开数据库：使用函数 sqlite3_open(char *path, sqlite3 **db);。

       2. 关闭数据库：使用函数 sqlite3_close(sqlite3 *db);。

       3. 执行SQL语句：使用函数 sqlite3_exec( sqlite3 *db, const char *sql, int (*callback)(void*,int,char**,char**), void *arg, char **errmsg );。

       4. 不使用回调函数执行SQL语句：使用函数 sqlite3_get_table(sqlite3 *db, const char *sql, char ***resultp, int*nrow, int *ncolumn, char **errmsg);。

       学习嵌入式物联网需要全面的知识，选择正确的学习路径至关重要。获取最新、全面的学习资料，可点击链接找小助理免费领取。

如何编译SQLite-How To Compile SQLite

       SQLite是ANSI-C的源代码。在使用之前必须要编译成机器码。这篇文章是用于各种编译SQLite方法的指南。

       è¿™ç¯‡æ–‡ç« ä¸åŒ…含编译SQLite的每个步骤的反馈，那样可能会困难因为每种开发场景都不同。所以这篇文章描述和阐述了编译Sqlite的原则。典型的编译命令已经作为例子提供了，以期望应用开发者能够使用这些例子作为完成他们自己定制的编译过程的的一个指南。换句话说，这篇文章提供了想法和见解，而不是交钥匙的解决方法。

       èžåˆVS单独源文件

       Sqlite是由超过一百个c源码文件以及众多的目录下的脚本构建的。Sqlite的实现是纯粹的ANSI-C，但是许多C语言源代码文件是由辅助的C程序生成或者转换来的，并且AWK，SED和TCL脚本会融合到完成的sqlite库中。对Sqlite构建需要的C程序和转换和创建C语言源码是一个复杂的过程。

       ä¸ºäº†ç®€åŒ–这些，sqlite也通过一个预打包的合并后的源码文件：sqlite3.c。这个合并文件是一个ANSI-C源码实现整个SQLite库的唯一文件。合并后的文件更容易处理。所有的东西都包含在这一个文件里，所以很容易进入一个更大的C或者C++程序的源码树。所有的代码生成和转换步骤都已经实现了，因此没有辅助的C程序需要去配置和变异，也没有脚本需要去运行。并且，因此所有哭都包含在一个翻译单元，编译器可以做更多高级的优化从而提升5%到%的性能。因为这些原因，融合后的源码文件sqlite3.c对所有程序来讲都是值得推荐的。

       æŽ¨èæ‰€æœ‰çš„应用程序使用融合文件。

       ç›´æŽ¥ä»Žå•ç‹¬çš„源码文件中构建sqlite当然可以，但是并不推荐。对一些特殊的应用程序，可能需要修改构建程序去处理使用那些从网站上下载的预构建的源码文件不能完成的情况。对于这些情况，推荐构建和使用一个定制过的合并文件。换句话说，即使一个工程需要以单独的源码文件构建sqlite，仍然推荐使用一个融合后的源码文件作为一个中间步骤。

       ç¼–译命令行接口（CLI）

       æž„建命令行接口需要三个源码文件：

       sqlite3.c:Sqlite融合的源码文件

       sqlite3.h:匹配sqlite3.c以及定义sqlite的c语言接口的头文件

       shell.c:命令行接口程序本身。这个c源码文件包含一个main()的例程和每轮循环的用户输入的提示符并将输入传给sqlite数据库引擎用于处理。

       æ‰€æœ‰çš„上述源码的三个文件都被包含在下载页面的amalgamation tarball中。

       ä¸ºäº†æž„建CLI，简单的将这三个文件放置在相同的目录下然后一起编译他们。用MSVC：

       cl shell.c sqlite3.c -Fesqlite3.exe

       åœ¨unix系统上（或者在windows上用cygwin或者mingw+msys）典型的命令会有些像这样：

       gcc shell.c sqlite3.c -lpthread -ldl

       ä¸ºäº†SQLite线程安全，需要pthreads库。但是因为CLI是一个单线程的，我们可以指示SQLite构建一个非线程安全的库并因此护绿pthreads库：

       gcc -DSQLITE_THREADSAFE=0 shell.c sqlite3.c -ldl

       -ldl库是在支持动态装载时需要，例如sqlite3_load_extension() 接口和load_extension()

        SQL function。如果这些特性都不要求，那么我们也可以使用SQLITE_OMIT_LOAD_EXTENSION编译时间选项忽略他们。

       gcc -DSQLITE_THREADSAFE=0 -DSQLITE_OMIT_LOAD_EXTENSION shell.c sqlite3.c

       æœ‰äººå¯èƒ½æƒ³è¦æä¾›å…¶ä»–的编译时间选项(compile-time options)，例如SQLITE_ENABLE_FTS3去全文本搜索或者SQLITE_ENABLE_RTREE用于R*树搜索引擎扩展。而有人将正常指定一些编译优化开关。（预编译的CLI可以从选择sqlite网站上使用“-Os”下载下来）有无数种可能的变数在这里。

       å…³é”®ç‚¹åœ¨è¿™é‡Œï¼šæž„建CLI需要编译一起两个C语言文件。shell.c文件包含入口的定义和用户输入的loop，而sqlite融合文件sqlite3.c包含完整的sqlite库的实现。

       ç¼–译TCL接口

        sqlite的tcl接口是一个小的模块被添加到一般的融合文件中。结果是一个新的融合后的源码文件，称之为“tclsqlite3.c”。这个源码文件是生成一个可以使用TCL

       load命令去加载到一个标准的tclsh或者wish中，或者随着sqlite构建成功生成一个单独唯一的tclsh的共享库所需要的。一个tcl的融合的副本被包含在下载页的TEA

        tarball中作为一个文件。

       ä¸ºäº†ç”Ÿæˆä¸€ä¸ªlinux上的sqlite的TCL-loadable库,下面的命令需要满足：

       gcc -o libtclsqlite3.so -shared tclsqlite3.c -lpthread -ldl -ltcl

       ä¸å¹¸çš„是构建Mac OS X 和 Windows的共享库并不是如此简单。对于这些平台最好使用包含在TEA tarball中的configure脚本和makefile.

       ä¸ºäº†ç”Ÿæˆä¸€ä¸ªå•ç‹¬çš„tclsh，可以用于sqlite静态链接，使用如下的编译器调用：

       gcc -DTCLSH=1 tclsqlite3.c -ltcl -lpthread -ldl -lz -lm

       è¿™é‡Œçš„技巧是-DTCLSH=1选项。sqlite的TCL接口模块包含一个main的过程，用于初始化一个TCL解释器并在以-DTCLSH=1编译后进入到一个命令行loop。上述命令可以工作在Linux和Mac

        OS X,虽然有时可能需要依赖于平台调整库选项以及编译的TCL的哪一个版本。

       æž„建融合文件

       ä¸‹è½½é¡µæä¾›çš„sqlite融合文件的版本对大多数用户来说是足够的。然而，一些工程可能想要或者需要构建他们自己的融合文件。一个常见的构建一个定制的融合文件的理由是为了使用特定的compile-time options来定制sqlite库。回想sqlite融合文件中包含了许多C代码由辅助程序和脚本生成。许多的编译时间选项影响这一成圣代码而且必须在融合文件组装前提供给代码生成器。这一系列必须传给代码生成器的编译时间相关的选项会使得sqlite的发布版本各不相同，但是在写这边文章的时候，代码生成器需要知道的这组选项包括：

       SQLITE_ENABLE_UPDATE_DELETE_LIMIT

       SQLITE_OMIT_ALTERTABLE

       SQLITE_OMIT_ANALYZE

       SQLITE_OMIT_ATTACH

       SQLITE_OMIT_AUTOINCREMENT

       SQLITE_OMIT_CAST

       SQLITE_OMIT_COMPOUND_SELECT

       SQLITE_OMIT_EXPLAIN

       SQLITE_OMIT_FOREIGN_KEY

       SQLITE_OMIT_PRAGMA

       SQLITE_OMIT_REINDEX

       SQLITE_OMIT_SUBQUERY

       SQLITE_OMIT_TEMPDB

       SQLITE_OMIT_TRIGGER

       SQLITE_OMIT_VACUUM

       SQLITE_OMIT_VIEW

       SQLITE_OMIT_VIRTUALTABLE

       ä¸ºäº†æž„建一个定制的融合文件，先下载原始的独立源码文件到一个unix或者类unix开发平台。确定获取的原始源码文件不是“预编译过的源文件”。任何人都可以通过到下载页或者直接从configuration management system.获取完整的一套原始源码文件。

       å‡è®¾sqlite源码树被存在一个名为“sqlite”的目录下。计划构建一个平行目录下的名为“bld”的融合文件。首先通过运行sqlite源码树种的configure脚本运行或者通过制作一份源码树顶层的的makfile模板的一份，来构建一个合适的makefile.然后手动编辑这个Makfile去包含需要的编译时间相关的选项。最终运行：

       make sqlite3.c

       åœ¨windows上使用MSVC:

       nmake /f Makefile.msc sqlite3.c

       sqlite3.c的make

       target会自动构造一般的“sqlite3.c”合并的源码文件，以及它的头文件“sqlite3.h”，和包含TCL接口的融合源码文件“tclsqlite3.c”。之后，需要的文件可以被拷贝到文件目录下然后根据上述勾勒的过程编译。

       æž„建一个windows的动态链接库DLL

       ä¸ºäº†åœ¨windows构建一个sqlite的dll使用，首先获取对应的融合过的源码文件，sqlit3.c和sqlite.h。这些可以从SQLite website上下载或者和上述告知的一样去定制生成。

       ä½¿ç”¨å·¥ä½œç›®å½•ä¸‹çš„源码文件，一个dll可以在msvc中使用如下命令生成：

       cl sqlite3.c -link -dll -out:sqlite3.dll

       ä¸Šè¿°å‘½ä»¤éœ€è¦è¿è¡Œåœ¨msvc的MSVC Native Tools Command

       Prompt.如何你已经在机器上安装了msvc，你可能有多个版本的这种命令提示符，针对于x和x的自带构建的，或者交叉编译到ARM的。依赖要求的DLL去使用对应合适的命令提示符工具。

       å¦‚果使用MinGW编译器，命令是这样的：

       gcc -shared sqlite3.c -o sqlite3.dll

       æ³¨æ„MinGW只生成位的dll。另有一个分开的MinGW工程可以用来生成位的dll。可以推断其命令行语法是类似的。需要注意的是最近的MSVC的版本生成的DLLs可能不能工作到WinXP或者更早版本的windows上。因此为了最大限度的兼容你的生成的dll，推荐MinGW。一个好的经验法则是使用MinGW去生成位的dlls，使用msvc去生成位的dlls。

Python程序开发系列利用Peewee库创建SQLite数据库、建表并写入数据（案例+源码）

       本文将使用Python编程语言中的Peewee库来创建一个SQLite数据库、建立表格并写入数据。以下是详细步骤：

       首先，理解Peewee库，这是一款轻量级的ORM（对象关系映射）库，简化了与关系型数据库的交互过程。Peewee支持多种数据库，包括SQLite、MySQL、PostgreSQL等。它的核心功能包括简化数据库操作，使其在Python中使用更加便捷和高效。

       接着，我们关注SQLite数据库。SQLite是一种嵌入式的轻量级数据库管理系统，无需单独服务器进程，其数据文件存储于本地，适用于小型应用和移动应用。其优点包括占用资源少、支持多种操作系统等。以下关键特性展示了SQLite的优势：

       接下来，我们实现数据库的创建、表设计、表创建和数据插入：

       第一步，利用`SqliteDatabase`类在项目目录中创建SQLite数据库文件。

       第二步，设计一个名为`Person`的表，包含`name`（字符类型）和`age`（整型）两个字段。

       第三步，通过执行`create_table`函数建立上述设计的`Person`表。

       第四步，将列表中的元素依次写入到`Person`表的`name`字段。

       最后，小结：本文通过Peewee库成功创建了SQLite数据库，设计和构建了`Person`表，并将数据写入了表中。本文旨在通过简单的实例，展示如何使用Peewee和SQLite进行基本的数据库操作。如果你对数据算法、Python编程、数据分析、机器学习、深度学习等领域感兴趣，欢迎关注公众号“数据杂坛”，获取更多源码和数据集。如需深入学习和实践，推荐查看原文链接。希望本文能为你的编程之旅提供帮助。

独家食用指南系列|Android端SQLCipher的攻与防新编

       欢迎来到本周技术拆解官的第二篇独家食用指南系列，主题聚焦于Android端的SQLCipher。如果您之前未了解过，可以回顾上篇指南进行预习。

       本篇指南将带领大家重新审视SQLCipher，一个在安全性方面为Android SQLite数据库加密的工具。首先，让我们了解一下SQLite的优缺点，作为分析SQLCipher的基础。

       SQLite作为轻量级数据库，具备易用性、易安装等优点，但也有性能和安全性上的局限。性能问题主要在于它在大并发、复杂查询等场景下可能遇到性能瓶颈；安全性方面，免费版本不支持加密，导致数据在未加密状态下容易被访问。

       为解决这些问题，我们可以从性能优化和安全加固两个方面入手。性能优化包括改善并发机制、使用连接池、开启WAL模式等，以提升数据库读写效率。安全加固则推荐使用SQLCipher，通过加密数据库，保障数据安全。

       SQLCipher基于SQLite接口设计，采用AES加密算法，提供安全加密数据库功能。它通过自定义的接口实现加密流程，加密过程分为写操作时的数据加密和读操作时的数据解密。使用SQLCipher时，主要涉及类替换和加载加密SO库两个步骤，无需侵入原有APP逻辑。

       在调试SQLCipher方面，Linux环境下的安装和生成加密库较为基础，可通过SQLiteStudio等工具进行可视化操作。最后，企业级应用在使用SQLCipher时通常会有额外的安全防护措施，例如百度汉语APP在数据库加载和秘钥获取上采取了多层保护。

       本指南从原理、实战角度出发，详细介绍了SQLCipher的使用方法和安全加固流程。随着指南的深入，我们即将进入关于SQLite源码剖析的最后一篇，敬请期待。

       在探索SQLCipher的过程中，我们不仅仅学习了如何使用这个工具，更重要的是理解了如何在实际应用中保护数据安全，为构建可靠的应用奠定基础。希望本指南对您的技术旅程有所帮助，期待您在实际项目中应用所学知识。

sqlite怎样利用查询结果来创建新表?

       当我们讨论sqlite时，如何利用查询结果创建新表是一个关键点。若要解答这一问题，我们需对sqlite的内部运作有深入理解。以《教父》中的名言作为引子，表明了慷慨与个人情感的联系，这里我们则将慷慨理解为对知识的热爱与分享。在忙碌的生活中，徒步成为了一种放松方式，尽管心中仍有未解之症结，但户外的风景与人情带来了一丝慰藉。工作与生活并重，自我成长与进步是追求的目标。

       在没有担任团队领导（TL）后，内心可能有失落感，但这也促使了对sqlite源码的探索。学习规划与安排工作，使思路更加条理化，这是一种自我提升的过程。同时，享受生活与做好工作并行不悖。

       近期的更新较为缓慢，原因在于深入研究sqlite源码，理解其核心部分，例如VBE与树结构的组织。我们采用情景分析的方法，从创建表开始，梳理创建表的流程，进而理解VBE的运行流程和数据存储方式。sqlite在解析SQL语句时使用了名为lemon的解析器与生成器，这一细节在知乎上有详细介绍。

       无需深入解析词法分析的细节，重要的是理解如何从输入的SQL语句跳转到功能实现，通过查看解析器的工作方式。让我们一起探索，从创建表的实现开始。

       创建表的关键SQL语句是：

       sql

       CREATE TABLE PERSON(ID INT PRIMARY KEY NOT NULL, NAME TEXT NOT NULL);

       选择这一语句是因为它能展示不同数据类型的处理，并保持简单。在处理输入时，函数process_input负责逐行处理，直至完成语句。在函数执行过程中，我们关注到runOneSqlLine，这是将SQL语句翻译为sqlite3_stmt并执行的关键步骤。这一过程涉及sqlite3_prepare_v2、sqlite3LockAndPrepare、sqlite3Prepare、sqlite3RunParser、sqlite3Parser等函数。

       解析SQL语句的核心在于一个名为yyParser的结构，它构建了一个符号表，用于标识SQL语句。搜索关键词“create table”导向了关键代码片段，揭示了创建表函数的调用过程。关注sqlite3StartTable与sqlite3EndTable，理解它们在创建新表记录中的作用。这些函数负责在内存中构建新的表表示，尤其在“CREATE”和“TABLE”出现时被调用。在创建表结束时，sqlite3EndTable()完成构建过程。

       创建表的实现涉及函数调用和信息填充，确保新表记录正确初始化。理解这一过程是解答如何利用查询结果创建新表的关键。关注细节，如参数传递与函数逻辑，对于深入学习sqlite源码至关重要。