Red shading: Missouri EIC comment, blue shading: Julie Lederer (JL) comment, purple shading: blend of EIC and Julie, gray shading: changes made based on Ralph Blanchard's (RB's) 4/18/19 comments

Commen
Identified Risk Comment Possible Change
t No.
1 N/A From Missouri EIC and JL: It would be helpful if each element within the  See Comment column
repository (risks, controls, control tests, and detail tests) were labeled 
with a number or letter. Perhaps each risk could be assigned a number, 
and each control within that risk assigned a capital letter, each control 
test within that risk assigned a Roman numeral, and each detail test 
within that risk assigned a lowercase letter. Going one step farther, it 
would be great if the numbering/lettering system linked controls, control 
tests, and detail tests together. It appears that the current document 
links associated elements via formatting conventions (i.e., by lining up 
associated elements), but this doesn't always work if, for example, one 
detail test could be associated with several controls.
2 "The board of directors (or committee  From Missouri EIC: "It never made sense to have 'establishing' as part of  Change the wording of the risk to: "The board of directors (or committee thereof) is not involved 
thereof) is not involved in establishing  this risk.  A Board of Directors would never 'establish' reserving  in reviewing the insurer’s overall reserving practices  or the reserves reported in the financial 
and/or reviewing the insurer's overall  practices...In common practice for P&C companies, the Board of Directors  statements."
reserving practices." or a Reserve / Claims Committee of the Board will review reserving levels, 
so it makes sense to add this to the risk."

3 "The board of directors (or committee  Recommended wording addition from Missouri EIC: Change the control  See Comment column

thereof) is not involved in establishing  that begins "The board of directors (or committee thereof) regularly 
and/or reviewing the insurer's overall  discusses…" to "The board of directors (or committee thereof) regularly 
reserving practices." discusses reserving levels, any reserving issues…" 
4 "The board of directors (or committee  JL comment regarding the control that begins "The board of directors (or  Delete the sentence that begins "The reports include an explanation of the reserving policy…"
thereof) is not involved in establishing  committee thereof)…": The appointed actuary's report isn't expected to 
and/or reviewing the insurer's overall  include an explanation of the insurer's reserving policy or methodology. 
reserving practices." The appointed actuary's role is to opine on the reasonableness of the 
insurer's carried reserves which, per SSAP No. 55, paragraph 12, should 
be established as management's "best estimate" of reserves.
5 "The board of directors (or committee  From Missouri EIC, in regards to the control test that begins "Verify that  Eliminate this control test, or  least delete the words "adopted and/" from the control test so 
thereof) is not involved in establishing  the insurer has established overall reserving practices…": "Have not seen  that it reads "Verify that the insurer has established overall reserving practices that have been 
and/or reviewing the insurer's overall  any instances in which a Board adopts or reviews overall reserving  reviewed by the board of directors (or committee thereof)."
reserving practices." practices.  I don’t see this as something that would actually occur, except 
in rare instances.  The Board would likely only address reserving practices 
if there are issues with unexpected reserve increases to address 
deficiencies or adverse development that occurs."
6 "The board of directors (or committee  Recommendation from JL and Missouri EIC: Add this language to the  See Comment column
thereof) is not involved in establishing  control test that begins "Review board of directors (or committee 
and/or reviewing the insurer's overall  thereof) minutes to ensure discussion of reserving.": "Verify that the 
reserving practices." minutes indicate that the appointed actuary reported to the board on 
the items within the scope of the actuarial opinion. Verify that the board 
discussed reserving levels and/or methodologies."

JL comment on the above recommendation: Paragraph 1 of the 2018 
Statement of Actuarial Opinion Instructions says, "The Appointed Actuary 
must report to the Board of Directors each year on the items within the 
scope of the Actuarial Opinion. The Actuarial Opinion and the Actuarial 
Report must be made available to the Board of Directors. The minutes of 
the Board of Directors should indicate that the Appointed Actuary has 
presented such information to the Board of Directors and identify the 
manner of presentation (e.g., webinar, in‐person presentation, written)."
Commen
Identified Risk Comment Possible Change
t No.
7 "The board of directors (or committee  From Missouri EIC, recommended additional test of the "The board of  See Comment column
thereof) is not involved in establishing  directors (or committee thereof)..." control: "Obtain the packet of 
and/or reviewing the insurer's overall  information provided to Board members in advance of meetings and 
reserving practices." determine if reserve levels are addressed in the financial reporting 
information."
8 "New claims are not entered into the claims  From Missouri EIC: "It is fine to keep this risk in the repository, but I  Eliminate this risk. Consider whether any of the controls, control tests, and detail tests for this 
management system." would delete it.  I can’t think of a scenario where this would ever be a  risk might be applicable to the "Claims data is incomplete…" risk.
material risk for an insurer.  Maybe this risk is a relic from the past when 
claims were submitted by paper forms and something could get  If the FEHTG decides not to eliminate this risk, a Missouri EIC made the comment that the detail 
misplaced or a backlog could occur.  Currently, most P&C claims are  test that begins "Select a sample of claim and expense payments..." should be moved from this 
submitted by phone to the insur’s claim staff or the agent, or via the  risk to the "Claims data is incomplete..." risk. This EIC noted that this detail test "has more to do 
insurer’s website.  A claim file is usually setup on the same day that the  with cut‐off/accuracy of claim data entered and not whether new claims were entered into the 
claim is reported.  I guess you could have a fraud scenario in which  system."
managemnt purposely delays setting up claim files in the system for 
reported claims.  However, this would only benefit cash flow and not the 
overall financial condition since the actuarially determined reserves 
would still drive the incurred loss / LAE for the period."  

Another Missouri EIC expressed concerns about the feasibility of testing 
controls or performing detail tests around this risk in the age of digital 
claims systems. True completeness testing is impossible when there isn't 
"a second record" against which to check the claims in the claims system. 
Formerly, examiners could select a sample of paper files and ensure that 
these claims were in the electronic system, but that type of testing isn't 
possible today.

JL comment: This risk appears to be covered in the risk that begins 
"Claims data is incomplete..."
9 "Claims data is incomplete or incorrectly  From Missouri EIC, regarding the control "The claims system has  Eliminate this control.
entered into the claims management  automated controls that will not allow a claim to be entered without a 
system." valid in‐force policy": "This control is not applicable to the risk.  The risk is 
that claims have been paid that have not been captured by the claims 
system, ie, a completeness issue.  This control is to prevent invalid claims 
from being paid, which has nothing to do with the completeness of the 
data."  
10 "Claims data is incomplete or incorrectly  From Missouri EIC, regarding the detail test "In situations where  Consider eliminating this detail test and the corresponding control and control test.
entered into the claims management  adequate segregation of duties is not apparent, obtain data to determine 
system." whether any claims were set up by the same user who created the  If the FEHTG does not eliminate these items, it might be helpful to clarify the connection 
corresponding policy in the master file. If any instances are identified,  between the control and the risk.
investigate the claim to ensure the claim exists and is supported by 
underlying data.": "This does not seem to be relevant to the 
completeness or accuracy of the paid claims data."

JL comment: The detail test referenced by the EIC corresponds to the 
control "Segregation of duties exists..." and the control test "Obtain 
claims set‐up and new policy set‐up..." So if the detail test is not related 
to the risk, then the control and control test probably aren't either. It 
sounds like the control and detail test might represent a way to search 
for possible internal claim fraud, but the link between the risk and the 
control isn't immediately apparent.
Commen
Identified Risk Comment Possible Change
t No.
11 "Claims data is incomplete or incorrectly  From Missouri EIC, a recommended additional detail test: "Perform a  See Comment column
entered into the claims management  reconciliation to compare claims checks cleared from the bank account 
system." with the claims paid in Schedule P.  No variance or an immaterial 
variance will indicate completeness of the Schedule P data." The EIC 
notes, "This has been my default completeness test for years.  It can be 
cumbersome to get a proper apples to apples comparison from the bank 
account to Schedule P, but it works well."
12 "The third‐party administrators (TPAs) or  Wording change suggestion from Missouri EIC for the detail test that  See Comment column
managing general agents (MGAs) are not  begins "Determine, by a review of selected claims…": Change the wording 
processing claims in accordance with the  to "Determine, by a review of selected claims, whether the insurer 
insurer’s claims procedures as outlined in the  and/or TPA/MGA is/are settling its claims..."
TPA agreement."
13 "Claims under claims‐made liability policies  From one Missouri EIC: "The risk 'Claims under claims made liability  Eliminate this risk.
are improperly accepted (or rejected) by the  policies are improperly accepted or rejected…' would be covered under 
claims adjusters." the previous risk 'Claims are not processed accurately…'." If FEHTG decides not to eliminate this risk, JL recommends eliminating the control test that 
begins "Perform a walkthrough…" and replacing it with something like "Perform a walkthrough 
From another Missouri EIC: "This would not appear to be a material risk  to ensure that claims under claims‐made liability policies are being properly administered." It is 
in most scenarios.  I would delete this risk. The risk has a very narrow  not clear what the existing control test means, though it may be referring to extended reporting 
focus.  Further, there would seem to be the same immaterial risk for  endorsement ("tail") coverage whereby claims can be reported after the expiration of the claims‐
occurrence basis policies and there is no risk in the repository for  made policy. In such a situation, the insurer records claim amounts in Schedule P according to 
occurrence policies." when the tail policy was issued, which might be what the control test is referring to when it 
mentions reallocating the claim to the correct policy year. Regardless, I don't believe this tests 
the "The insurer has a policy in place…" control.
14 "The claims data utilized by the actuary to  From one Missouri EIC: "I recommend that the repository specifically  1) Change the wording of the risk to "The claims data utilized by the actuary to estimate reserves 
estimate reserves does not correspond to  address Schedule P: Reviewing the opining actuary’s test of Schedule P as  does not correspond to the data in the insurer’s claims system  and Schedule P."
the data in the insurer’s claims system and to  a possible control test; Reconciling Schedule P as a possible substantive  2) Change the sentence in the control that begins "The insurer has established procedures to 
the data in the insurer’s accounting records." test." reconcile actuarial data..." to "The insurer has established procedures to reconcile actuarial data 
to the insurer’s claims system and Schedule P."
From another Missouri EIC: "It makes more sense that the risk refers to  3) Add the control "The appointed actuary reconciles the claims data used in the analysis to 
Schedule P instead of a vague reference to the insurer’s accounting  Schedule P Part 1." The associated control test would be to review the appointed actuary's 
records.  Even if the actuarial data matches with amounts in G/L  reconciliation, and the associated detail test would be to perform an independent reconciliation.
accounts, it is still more important that the data matches what is  4) Delete the detail test that begins "Reconcile the insurer's actuarial report for losses..."
reported in Schedule P."
15 "Reinsurance is not properly taken into  From Missouri EIC: "A couple of the risks relating to reinsurance seem  Eliminate this risk. Consider moving the control that begins "The insurer has established 
account in accumulating claims data." duplicative." procedures...", the control test that begins "Test the operating effectiveness…" and the detail 
test that begins "Verify assumed reinsurance…" to the "The claims data utilized by the actuary…" 
JL comment: Given the recommended controls, control tests, and detail  risk.
tests, this risk appears to be covered by the previous risk ("The claims 
data utilized by the actuary…").
16 "Initial case reserves are not established or  From Missouri EIC: "There are two risks relating to claims reserves being  Combine the two risks "Initial case reserves are not established or reviewed in accordance with 
reviewed in accordance with the insurer’s  established/updated that seem like they could be combined." the insurer’s standards" and "Case reserves are not updated accurately." The new risk could read 
standards." and "Case reserves are not  "Case reserves are not established, updated, or reviewed in accordance with the insurer's 
updated accurately." standards."
Commen
Identified Risk Comment Possible Change
t No.
17 "Initial case reserves are not established or  From JL: One of the possible controls for this risk is that "qualified  Remove references to actuaries in this risk's controls and control tests:
reviewed in accordance with the insurer’s  actuaries are involved in establishing and reviewing the reserving policy,"  1) Change the control that begins "The insurer has a case reserving philosophy…" to something 
standards." and one of the possible control tests is to "Review the reserving  like "The insurer has a case reserving philosophy, and personnel with experience in claims 
philosophy for actuarial review and policy adequacy." Actuaries usually  handling are involved in establishing and reviewing the reserving policy."
aren't involved in establishing or reviewing case reserving policies,  2) In the control test that begins "Obtain documentation supporting..." delete the sentence that 
though they do consider any changes in case reserving policies when  begins "Review the reserving philosophy for actuarial review..."
performing their analyses; the need for the actuary to consider case 
reserving changes is covered under the risk "The assumptions and 
methodologies..." 
18 "Initial case reserves are not established or  From Missouri EIC: There is no corresponding test of controls for the "The 
Missouri EIC suggests adding a possible test of controls like: "Obtain/review audit reports and/or 
reviewed in accordance with the insurer’s  insurer verifies that the TPAs that process claims follow the insurer’s  other documentation to determine whether the insurer is reviewing the TPA/MGA’s compliance 
standards." guidelines for setting case reserves on reported claims" control. with the insurer’s guidelines for setting case reserves on reported claims."
19 "The insurer is not properly recording case  From Missouri EIC: "A couple of the risks relating to reinsurance seem  Eliminate this risk. This risk is covered in the "Case reserves are not established, updated, or 
reserves (assumed or ceded) for contracts  duplicative." reviewed in accordance with the insurer's standards" risk (which is, itself, a combination of two 
subject to reinsurance." risks, as recommended in a comment above).
19 "The assumptions and methodologies used  JL comment: The wording of the risk and certain controls assumes that  1) Change the wording of the risk to "The assumptions and methodologies used by the insurer or 
by the insurer are not accurate or  the insurer has an internal actuarial function, on whose work the  its appointed actuary..."
appropriate." insurer's management bases its carried reserves. Some insurers,  2) Change the wording of the control that begins "The insurer uses…" to "The insurer or its 
especially small ones, base their carried reserves entirely on their  appointed actuary uses..."
external appointed actuary's independent reserve analysis. The language  3) Change the wording of the control test that begins "Gain an understanding of the insurer's..." 
in the repository could be made more general with a few minor wording  to "Gain an understanding of the insurer's or its appointed actuary's..."
adjustments. 4) See comment 25 below for more suggested changes to the wording of the risk.

RB comment: "Can a word other than 'accurate' be found?  Reserving is 
not a precise science, and differences between actual and expected are 
rarely zero.  Perhaps replace 'accurate' with 'reasonable'?"  

20 "The assumptions and methodologies used  JL comment: One of the controls assumes that senior management  1) Change the control that begins "The insurer uses consistent assumptions…" to "The insurer or 

by the insurer are not accurate or  "approves" the actuarial function's assumptions and methodologies. I  its appointed actuary uses consistent assumptions and methodologies that are based on 
appropriate." have never seen this type of approval process in place at an insurer. Nor  historical results (to the extent appropriate) and adequately documented. The assumptions and 
would such a process be favorable. Ideally, the actuarial function would  methodologies are in accordance with statutory accounting principles and applicable state 
enjoy independence from the members of senior management charged  statutes and/or regulations."
with establishing carried reserves. In addition, it wouldn't be appropriate  2) Delete the control test that begins "Verify that senior management signs off on assumptions 
for senior managers without actuarial training to have approval authority  and methodologies..."
over the assumptions and methods used by the actuarial team.

That said, it would be perfectly reasonable to add controls and control 
tests that are designed to ensure that the insurer's actuarial team, or the 
external appointed actuary's team, has a process whereby significant 
assumptions and methodologies are reviewed by senior leaders  of the 
actuarial team who have the appropriate knowledge and experience .
21 "The assumptions and methodologies used  JL comment: In the detail test "Compare the opining actuary's  Either delete this detail test or, if the intent is to compare the opining actuary's assumptions and 
by the insurer are not accurate or  assumptions and estimates with those in other available actuarial  methods with those of the internal actuarial function, then reword the detail test as "Compare 
appropriate." analyses," it's not clear what the "other available actuarial analyses" refer  the opining actuary's assumptions and methods with those used by the internal actuarial 
to. function."
22 "The assumptions and methodologies used  JL comment regarding the control test that begins "The insurer's  1) Change the control that begins "The insurer's organizational structure…" to "The insurer's 
by the insurer are not accurate or  organizational structure…" and the associated control test: The topic of  management does not inappropriately influence the methods, assumptions, or conclusions of 
appropriate." management's influence on the appointed actuary is an important one,  the appointed actuary."
but I believe the wording of this control and test could be adjusted. It's  2) Change the control test that begins "Interview the appointed actuary..." to "Interview the 
not clear that this risk could be adequately controlled through the  appointed actuary during the planning phase of the examination to ascertain the degree of 
"insurer's organizational structure." influence the insurer's management has on the appointed actuary's work."
Commen
Identified Risk Comment Possible Change
t No.
23 "Catastrophe‐type (CAT) claims or large or  From Missouri EIC: "It does not appear that this would ever be a material 
1) Eliminate this risk. Consider adding a control like "Catastrophe claims and large claims are 
significant exposure type claims data are not  risk.  Consider deleting this one.  Even on exams of insurers with  analyzed separately in the actuarial reserve analysis" to the "The assumptions and 
separately identified and evaluated from  significant catastrophe exposure (eg, homeowners), I don’t recall any  methodologies..." risk. The associated control test could be "Review the actuarial reserve 
other claims." situation in past exams where this type of risk has been communicated  analysis to ensure that catastrophe claims and large claims are analyzed separately."
from our consulting actuary or has been a risk for the exam staff." 2) For companies with high CAT exposure that rely on independent adjusters to handle high‐
volume events, consider adding a claims‐handling risk like "The insurer does not have sufficient 
processes in place to monitor the activities of independent claims adjusters."
24 "Changes in the legal environment or  From Missouri EIC: "The risk relating to 'Changes in the legal  Eliminate the "Changes in the legal environment or changes in the insurer’s underwriting…" risk. 
changes in the insurer’s underwriting, case  environment…' could be eliminated since this would be considered in the  Consider moving the controls, control tests, and detail tests from this risk to the "The 
reserving or claims‐handling processes are  risk that assumptions and methodologies are not appropriate." assumptions and methodologies..." risk.
not appropriately considered within the 
insurer’s reserving assumptions and 
methodologies."
25 "The loss and loss adjustment expense (LAE)  JL comment: The controls, control tests, and detail tests for this risk are  Eliminate this risk. Consider changing the wording of the "The assumptions and 
reserve computations are not performed  very similar to those for the "The assumptions and methodologies…" risk. methodologies…" risk to "The assumptions and methodologies used by the insurer are not 
correctly or the selected estimates are  appropriate, the calculations in the reserve analysis are incorrect, or the estimates selected are 
unreasonable." not appropriate in comparison to the method results."
26 "The computation of reinsurance credits  JL comments:  Eliminate this risk.
within loss reserves are not performed  1) This risk seems to be included in other risks. The risk that the data is 
correctly." incorrect is covered in the risk that the claims data used by the actuary is 
incorrect and the risk that the case reserves are incorrect. The risk that 
the methods are applied incorrectly or the assumptions are inappropriate 
is covered in the "The assumptions and methods..." risk.
2) The two controls do not seem like they would mitigate the risk. The 
two controls just describe ways in which the net‐of‐reinsurance reserves 
can be derived.

From Missouri EIC: "A couple of the risks relating to reinsurance seem 
duplicative."

27 "Management books reserves that are  JL comment regarding the "The insurer's organizational structure…"  Delete this control and the associated control test. If they are retained, consider implementing 

materially different than the actuary's best  control and the associated test: This control would not mitigate the risk  the suggested wording changes described above:
estimate." that management books reserves that differ materially from the  1) Change the control that begins "The insurer's organizational structure…" to "The insurer's 
appointed actuary's estimate. The control is related to the risk that  management does not inappropriately influence the methods, assumptions, or conclusions of 
management will pressure the appointed actuary to adjust his/her work. the appointed actuary."
2) Change the control test that begins "Interview the appointed actuary..." to "Interview the 
appointed actuary during the planning phase of the examination to ascertain the degree of 
influence the insurer's management has on the appointed actuary's work."

28 "Management books reserves that are  JL comment: Anytime the term "actuary's best estimate" is used, the  Change "actuary's best estimate" to "appointed actuary's point estimate" wherever it appears. 

materially different than the actuary's best  wording should change. SSAP No. 55 references management's best  This would bring the wording in the repository into alignment with the wording used in the 2018 
estimate." estimate, so it's acceptable to use the phrase "best estimate" in reference  Actuarial Opinion Summary instructions.
to management, but ASOP No. 43 says, "The terms 'best estimate' and 
'actuarial estimate' are not sufficient identification of the intended 
measure [of the unpaid claim estimate], as they describe the source or 
the quality of the estimate but not the objective of the estimate."
Commen
Identified Risk Comment Possible Change
t No.
29 "Management books reserves that are  JL comment: The risk seems incomplete as worded. Management is  Change the wording of the risk to "Management does not have reasonable support for its carried 
materially different than the actuary's best  directed to book its "best estimate" of the reserves. If management's  reserves."
estimate." "best estimate" differs materially from the appointed actuary's estimates, 
management presumably is obliged to book its best estimate if 
conversations with the appointed actuary don't resolve the differences. 
Regardless, management should be able to support its carried reserves.

RB comment: "I'm also concerned with placing too much emphasis on a 
single point estimate vs. a range of reasonable estimates.  The concern I 
have is with regard to the perspective of changing a previous estimate.  
For a public company there needs to be a reason why management 
changed their previous estimate.  Hence management is not supposed to 
react to noise in their estimates.  But in my experience the same is not as 
true for actuarial estimates.  Keeping the same method would result in 
the point estimate changing from period to period due to normal 
variability (noise) in the process.   Would suitable documentation (for the 
difference between management's estimate and the actuary's point 
estimate) be that management does not believe there is sufficient 
reliable new information to deviate from management's prior estimate, 
and that the change in the actuary's point estimate cannot be reliably 
distinguished from 'noise' at this time?  (I am aware that this might be 
abused by some, but an SEC filer isn't supposed to change a prior 
estimate unless there is new, credible information to support the 
change.)"

30 "Management books reserves that are  JL comment on the control that begins "The insurer has a process in  1) Change the wording of the control to "The insurer has a process in place for determining 

materially different than the actuary's best  place…": Management does not have to carry reserves that align with the  carried reserves, and management is able to explain its selection."
estimate." appointed actuary's estimates, so the wording of this control seems to  2) Change the wording of the associated control test to "Review management's guidelines 
assume something that is not required. regarding the determination of carried reserves. Verify that any material changes from the prior 
year's reserves and any material differences between the carried reserves and the appointed 
actuary's point estimate are properly documented."
3) Delete the associated detail test ("Review the actuarial report...").
4) In the control test that begins "Review meeting minutes..." change the "i.e." in the 
parenthetical to "e.g." The actuarial report is one possible form of support for management's 
carried reserves, but not the only acceptable support.
5) In the detail test that begins "Review the documentation...", change the wording to "Review 
the documentation that supports management's selected reserves, including management's 
analysis of the reasonableness of the reserve estimates."

31 "The insurer does not maintain an adequate  JL comment on the control that begins "The insurer has a process in  See Comment column

premium deficiency reserve." place…": The reference should be to SSAP No. 53 ("Property Casualty 
Contracts ‐ Premiums"), not SSAP No. 54 ("Individual and Group Accident 
and Health Contracts").
Commen
Identified Risk Comment Possible Change
t No.
32 "The insurer does not maintain an adequate  JL comment on the control that begins "Independent actuaries review…"  1) Delete this control and the associated control test.
premium deficiency reserve." and the associated test that begins "Obtain the actuarial opinion…": The  2) Add a control that reads "The function responsible for estimating the premium deficiency 
appointed actuary is not required to opine on the reasonableness of the  reserve uses reasonable, actuarially‐determined estimates of the ultimate loss and LAE ratio." 
premium deficiency reserve. In fact, many appointed actuaries explicitly  The associated test could be "Obtain the premium deficiency reserve calculations and verify the 
exclude it from the scope of their work, either in the actuarial report or  reasonableness of the loss and LAE ratios."
statement of actuarial opinion. The premium deficiency reserve 
calculation does use actuarial estimates (specifically, the estimated 
ultimate loss and LAE ratio). The PDR calculation is often carried out by 
the accounting function. The important thing is for the person 
performing the calculation to use appropriate loss and LAE ratios as 
inputs.